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两 个 或 多 个 试验 的 独立 性 的 概念 , 一 定 意 义 上 在 概率 中 占 中 心 位 置 .……… 历史 
上 试验 和 随机 变量 的 独立 性 , 曾经 是 赋予 概率 论 以 印迹 一 种 数学 概念 . 


А.Н. 柯 尔 莫 戈 洛 夫 ,《 概 率 论 的 基本 概念 》 [33] 





81. 0-1 律 
1. 柯 尔 莫 戈 洛 夫 0-1# RA, 下 面 两 个 级 数 : 


У: 和 Ур, 
п=1 п=1 


其 中 前 一 个 级 数 发 散 , 后 一 个 级 数 收敛 . 现在 , 提出 如 下 问题 : 对 于 独立 同 分 布 伯 努 
利 随机 变量 序列 &1, 2,.… 关于 级 数 

> É, дф P{ =+1}=P{& = 1) = > 
的 收敛 性 有 何 说 法 ?” 换 句 话说 , 假如 级 数 的 一 般 项 为 +1/n, 其 中 符号 “e A 
与 上 述 序列 &1,&2,… 相对 应 , 并 按 随机 顺序 “散布 那么 是 否 可 以 说 “以 &„/п 为 
一 般 项 的 级 数 收敛 "? 


А = fo эрге вш) 
п=1 ы 

是 使 其 中 的 级 数 收敛 (于 某 些 数值 ) 的 基本 事件 w 的 集合 , 并 且 在 事先 并 不 知道 该 

集合 的 概率 P(A) 取 何 值 的 情况 下 , 讨论 概率 P(A). 

不 过 , 非常 精彩 的 是 , 事先 就 可 以 断定 : 这 一 概率 只 可 能 取 0 或 1 两 个 值 之 一 . 
这 一 结果 是 称 做 柯 尔 莫 戈 洛 夫 (А. Н. Колмогоров) 0-1 律 的 推论 . 0-1 律 的 提 法 和 
证 明 是 这 一 节 的 基本 内 容 . 

2. 柯 尔 莫 戈 洛 夫 0—1 律 的 证 明 HNF, P) 是 概率 空间 , &1,é2,… 是 一 随机 
变量 序列 . 以 9 = о (Е, азл.) 表示 由 随机 变量 ,n+ … 生成 的 o- 代数 ， 
并 且 设 

LNF: 


п=1 
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由 于 o- 代数 的 交 仍 然 是 c- КЖ, 可 见 .多 是 c- 代数 . 因为 对 于 任意 有 限 数 п, 
任何 事件 4 е # 都 不 依赖 于 &1,… ,én, 而 仅 由 “序列 61,é&2，… 的 无 穷 远 的 性 质 ” 
所 决定 , 故我 们 把 o- 代数 .多 称 做 “尾部 的 ”或 “剩余 的 ”. 

由 于 对 于 任何 k>1, 有 


S 位 ва) = [5 на) ся, 
n=l n=k 

则 7 = Ж. 同样 ,假如 &,62,… 是 任 一 随机 变量 序列 , 则 

Аз = (5 ва) EF. 


n=1 


下 列 事件 也 是 “尾部 的 ”: 
As = FERA nén еъ) (=їш{&єҺ}) 


Ж І, є.#(В),п >1 





Ре” 
за е 
мев} 
т a; 
Ж-ын!) 


+6. 另 一 方面 


= {对 于 一 切 п> 1,4, =0}, 
в, = {шие +: En) 存在 且 小 于 с} 


其 中 Sn =а+.- 


都 是 不 属于 的 .多 事件 的 例 . 
现在 假设 所 考虑 的 随机 变量 是 独立 的 . 在 此 条 件 下 , 由 博 雷 尔 - 坎 泰利 引 理 , 可 


见 

Р(Аз) =0% DP{én € In} < оо, 

Р(Аз) =1 DP{én € In} = ос. 
这 样 , БИЙ Уре, є 1} 是 否 收敛 为 转移 , 事件 Аз 的 概率 只 有 0 或 1 两 个 可 能 
值 . 这 一 命题 称 做 博 雷 尔 “0-1” 律 , 它 是 如 下 命题 的 特殊 情形 . 


$1. 0-1 律 5. 





定理 1 ( 柯 尔 莫 戈 洛 夫 “0-1? Ф) 设 61,62,… 是 独立 随机 变量 序列 ,而 4E 
Ж. ЖА, 概率 P(4) 只 有 0 和 1 两 个 可 能 值 

证 明 证 明 的 思路 如 下 : 为 证 明 每 一 “尾部 ”事件 4 与 它 自己 独立 , 只 需 证 明 
Р(АПА) = P(A) xP(4),P(4)=P?(4), 故 P(4)=0 或 1. 

ЖАЄ, ДАЄ = ов, в... } = (UF 1), ЖФ ЖҮ = (6 En), 
并 且 存 在 集合 he 多 1,n > 1 (第 二 章 $3, 练习 题 8), № Р(АЛА,) 一 0,n — оо. 由 
此 可 见 ， 

Р(А„) > P(A), Р(А„ПА) > P(A4). а) 


但 是 , 假如 A cL, 则 对 于 每 一 个 n> 1, 事件 4。 和 A 独立: 
Р(АПА,) = P(A)P(An), 


由 于 (1), 由 此 可 见 P(A) = P2(4), 故 P(4) = 0 或 1. o 

Я ТАХТ “А о 代数 .多 可 测 的 随机 变量 , № (пе В} e #,ВЄ 
BAR), 则 п 是 退化 随机 变量 , 即 存在 常数 c, 使 P{n =c}=1. 

з. 柯 尔 莫 戈 洛 夫 0-1 律 的 应 用 下面 引 进 的 定理 2 是 柯 尔 莫 戈 洛 夫 “0-1 律 ” 
的 非 平凡 应 用 . 

设 &1,€2,… 是 独立 伯 努 利 随 机 变量 序列 : Р{Е, = 1} = p,P{én = -1} = 9,p+ 
4=1n>1l 而 Sn = & + +&. 直观 上 明显 , 对 于 对 称 (р = 1/2) 的 情形 , 随机 游 
动 Sn(n > 1) 的 “典型 ”轨道 无 限 多 次 地 经 过 0, 而 对 于 р 1/2 的 情形 “趋向” 无 
37. 下 面 是 这 一 结果 的 确切 表述 . 

定理 2 а)#Жр=1/2, Я P{ 对 于 无 限 多 个 m Sn =0} =1. 

b) w $ p #1/2, 则 P{ 对 于 无 限 多 个 п,5„ =0} = 0. 

证 明 首先 注意 到 , В = {对 于 无 限 多 个 n, Sn = 0} 不 是 “尾部 ” 事件, 即 ве 
Ж = [АЎ УУ, = ofn аъ: 因此 , 原则 上 不 能 说 明 事件 В 的 概率 只 有 0 
或 1 两 个 可 能 值 . 

利用 博 雷 尔 - KEF (Е. Borel – Е.Р. Cantelli) 引 理 (的 第 一 部 分 ), 容易 证 明 
命题 b). 事实 上 , 如 果 Bon = {52n = 0}, 则 可 见 斯 特 林 (J. Stirling) 公式 (第 一 章 82 
第 4 小 节 ), 有 < 

PBa) = chpro ЧИ, 
从 而 Уу; P(Ban) < оо. 因此 , P{ 对 于 无 限 多 个 ,Sn = 0} = 0. 
由 于 A С В, 为 证 明 命题 a), 只 需 证 明 事 件 


一 Sn Sn 
А= пи = оо, Шш = -} 
的 概率 等 于 1. 
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Ж А. = А. ПА”, 其 中 


А’ = [mi >c}, а; = шб <- e}. 
ЖА, Че 一 cc 时 A. | А; 这 时 А 以 及 所 有 А,, Аи 都 是 尾部 事件 . 现在 验证 , 对 
于 每 一 个 c P(A.) = P(A!) = 1. BF A, є Z,A! є Ж, 故 只 需 证 明 P(42) > 
0,Р(А”) > 0. 然而 , 根据 练习 题 5 ARAR - 拉 普 拉 斯 定理 (А. DéMoivre- Р. S. 
Laplace, 第 一 章 86), 有 


FÆ. 对 于 一 切 ec > 0, P(A.) = 1, 因而 P(A) = lim P(A.) =1. 口 


а. 休 伊 特 和 塞 维 治 0-1 律 ” 我 们 再 次 强调 , 事件 В = {对 于 无 限 多 个 m Sn = 
0} 不 是 “尾部 ”事件 . 不 过 , 由 定理 2 可 见 , 对 于 伯 努 利 概 型 , 这 一 事件 的 概率 同 “ 尾 
部 ” 事件 的 概率 一 样 , 只 有 0 或 1 两 个 可 能 值 . ЖЖ, 这 种 情况 并 不 偶然 , 它 是 所 谓 
休 伊 特 (E. Hewitt) R Hts (1. В. Sevage) 0-1 律 的 推论 . 对 于 独立 同 分 布 随机 变 
Ж, 休 伊 特 和 塞 维 治 0-1 律 , 将 定理 1 的 结果 推广 到 所 谓 “ 可 交换 ”事件 类 (包括 “ 尾 
部 ”事件 类 ). 

现在 给 出 必要 的 定义 . 集合 (1,2,…) 到 自身 的 单 值 影射 (ri, 72,… ) 称 做 有 限 
可 交换 的 , 如 果 对 于 一 切 (只 可 能 有 有 限 个 除外 ) n, an = п. 

如 果 = (&1,&2,…) 是 随机 变量 序列 , 则 以 (Е) 表示 (Emn) 是 随机 变量 
序列 . 

如 果 事 件 А = {£ € В}, В є BR”), 则 以 r(A) 表示 事件 {r(5) € B},B є 
BR”). 

称 事件 4 = {€ € B}, В є Ә(Е°°) 为 可 交换 的 , 如 果 对 于 任意 有 限 排列 т, 事件 
r(4) 与 4 重合 . 

事件 A = { 对 于 无 限 多 个 m Sn = 0}, 其 中 Sn = Ettin, 是 可 交换 事件 的 例 . 
此 外 可 以 证 明 (练习 题 4), 属于 “尾部 " c- 代数 #`(5) = ГУ (5) 的 每 一 个 事件 是 
可 交换 的 , 其 中 92 (5) = ofw : Sn, Sn+1,…} 是 随机 变量 5) = &, 55 = & + 6,5: 
生成 的 o- 代数 . 

定理 3 ( 休 伊 特 和 塞 维 治 0-1 Ф) IES (61,62,…) 是 独立 同 分 布 随机 变量 
序列 ,而 A= {ЕВ} 是 可 交换 事件 , 则 P(A) 一 0 或 1. 

证 明 А = (се В} 是 可 交换 事件 . 选择 一 集合 B є BR"), 使 ( 见 第 二 章 
33 练习 题 8 ) 

P(AAAn) —0, п оо, (2) 


其 中 An = {w : (61,… ,én) ЄВ). 
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由 于 随机 变量 2,5, 独立 且 同 分 布 , 可 见 概率 分 布 Pe(B) = Р{& < В} 和 


已 .6(B) = P{rn(é) є В}, 其 中 mn(E) = (Enti бт, в, EnEontlheant2 


对 于 任何 n > 1 相同 . 因此 ， 
Р(АЛА,) = Pe(BABn) = Pi, (a (BABn). 
因为 4 = {Е В} 是 可 交换 事件 , 故 
A = {£ € B} =т„(А) = {л„(&) € В}. 
从 而 


Pr, (a(BABn) = Р({т„(&) є В}А{т(&) є Bn}) 


= P({§ є В}А\{т„(&) є Bn}) = Р(ААл„(А„)). 


这 样 , 由 式 (3) 和 (4), 有 
Р(АЛА„) = Р(АЛт„(А„)). 
因为 (2) 式 , 由 此 可 见 
Р(АА{А„[\т«(А„)}) > 0, n= ос. 
因而 由 式 (2), (5) 和 (6), 可 得 当 n 一 оо 时 , 有 


Р(А„) 一 P(4)，P(rn(4n)) > P(A), 
Р{А, Пт (Аһ)) > P(A). 


其 次 , 由 于 随机 变量 &1,€2,… 的 独立 性 , 有 


Р{А„[\т„(А„һ)} = P{(€1, + En) < Ва, (n+ Sn) © Bn} 


= 了 P{(6 ,en) € ВҺ}Р{(&а+1. Sn) € Ви} = Р(А»)Р(т(А»)). 


根据 性 质 (7), 由 此 可 见 
P(A) = P?(A), 
于 是 P(4)=0 或 1. 
5. 练习 题 
1. 证 明定 理 1 的 系 . 


2. 设 (&һ)п>1 是 独立 随机 变量 序列 , 证 明 те» 和 іше, 是 退化 随机 变量 


), 


(3) 


(4) 


(6) 


(7) 


3. Ж (En)n>1 是 独立 随机 变量 序列 , Sn = E+ +E 而 如 是 常数 且 0 < bn 1 оо. 


证 明 
me 和 im? 
n bn “п bn 
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是 退化 随机 变量 . 

4. B Sn = б + +&,п > 1, №, (S) = NZY(S), FZS) = ofw : 
Sn, Sn+1,…, 证明 ES) 中 的 每 一 个 事件 都 是 可 交换 的 . 

5. 设 (&һ)п>1 是 独立 随机 变量 序列 , 证 明 对 于 任意 常数 с, 有 {ime > с} 2 
{limén >с}. 

6. 举 一 概 率 严格 大 于 0 且 严 格 小 于 1 的 《尾部 》 事 件 的 例 . 

7. 设 а, &,:-. 是 独立 随机 变量 , EE, = 0, EE? = 1,n > 1, 且 服从 中 心 极 限定 理 
(Р{5„/уп < т} > Ф(т), те R, ДФ Sn =& +... +, ЇЇ Dle) 是 标准 正 态 分 布 函 
ЖО, 证 明 


Тїп nl/2S。 = +оо (Р-а.с.). 
п=бо 


特别 , 对 于 独立 同 分 布 随机 变量 序列 (车 Ес, = 0, EE = 1), 这 一 性 质 仍然 成 立 . 
8. 设 &1,62,… 独立 同 分 布 随机 变量 序列 , А. Elg] > 0, 证 明 


ш. Ea = +оо (Р-ас.). 
к=1 


82. 级 数 的 收敛 性 


1. 独立 随机 变量 的 级 数 的 敛 散 性 准则 ”假设 61, 62,… 是 独立 随机 变量 序列 ， 
Sn =E tt En 而 A 是 使 级 数 D nlo) 收敛 于 有 限 极限 的 基本 事件 w 的 集合 . 
BARELA R 0-1 律 知 , 概率 P(A) = 0 或 1, MAR Уе, 以 概率 1 收敛 或 发 散 . 
这 一 节 的 目的 是 , 给 出 确定 独立 随机 变量 的 级 数 收敛 还 是 发 散 的 准则 . 

定理 1 ( 柯 尔 莫 戈 洛 夫 - ЖК) а) ЖЕ, = 0п>1. 那么 , 如果 


Ува < оо, (1) 


ДАЖЕ, 以 概率 1 А. 

b) ЖА, 如 果 随 机 变量 Enn > 1, 一 致 有 界 (对 于 某 个 c < 00,P{lén| < с} = 1), 
则 逆 命题 也 成 立 : Жи уе, 以 概率 1 收敛 , 则 条 件 (1) 成 立 ， 

该 定理 的 证 明 本 质 上 用 到 下 面 的 不 等 式 . 

柯 尔 莫 戈 洛 夫 不 等 式 а) 设 61,62,… ,6 是 独立 随机 变量 ，EE = 0,Е&? < 
00,0 < i<n. 那么 ,对 于 任意 => 0, 有 


ES? 
> < 5%. 2 
Раву) 8 2 


b) ЖЕ, + ЖР < с} =1,0<i <n, Я 


i ење)? 
Р{ mes Sul 2} >1 ES ` (3) 
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ЗЕЯ a) 记 
{m s> e}, 
Ак = {15| < =, = -,К—1,[5%| >=}, 1<К<п. 


ЖА, А = УА, 而 
ES? > Е5214 = У ESIA- 


因为 
Е5АГА, = ElSk + (бы + +&)] 1А, 
= Е5 1А, + 25% (ка + + 6.) Га, + BE(ék+1 ++ + En) ТА, > ЕА, 
其 中 由 于 独立 性 假设 和 条 件 EE = 0,0 < i < п, 可 见 
ESk (kyi +++ + Ena, = ESkIA. x Е(©к+1 + + а) =0, 


所 以 
ES? > > Е5ИА, >є°ў P(4k) = є?Р(А), 


于 是 , 不 等 式 (2) 得 证 . 
为 证 明 不 等 式 (3), 注意 到 


Е5214 = ES? – ES2I4 > ES? – є?Р(А) = ES – ғ? + є?Р(А). (4) 
另 一 方面 , 在 集合 A 上 , 有 
|5к-1| Зе, |5] < ISk-il+lérl < E +6, 
因而 


ES214, = 》 Ел, + УЕА, (5 — 5к)°] 
к k 


< (є+<)#ў`Р(А„) +} P(A) у, Е 
k 








k=l j=k+1 
<P(4) |e ++ $ee] =P(A)|(e +0)? +ES] (5) 
j=1 
由 式 (4) 和 (5), 得 
ES? – 2 5 (= + с)? (6+ с)? 
P(4)> (eF) + Е52 一 < — К (24 0)2 + Е52 -ea Е52 ` 


于 是 , 不 等 式 (3) 得 证 . 口 


Jo 第 四 章 ， 独 立 随机 变量 之 和 与 独立 随机 变量 序列 





定理 1 的 证 明 а) 根据 第 二 章 510 定理 4, 序列 (Sn) 以 概率 1 收敛 , 当 且 
仅 当 该 序列 以 概率 1 是 基本 序列 . 根据 第 二 章 {10 定理 1, 序列 (Sn) AEREA 
(Р — а.с.) 的 充分 必要 条 件 是 , 对 于 任意 = > 0, 有 





P 人 ls 一 Sn| > e} +0, 7 оо. (6) 
k>1 
由 (2) 式 , 有 
Р КО -sl> ) = к (Sase — Sal > ) 
п+№ 
D Eg Ува 
«А 


因此 , 如 果 È Её? < оо, 则 条 件 (6) 成 立 , 于 是 级 数 D E 以 概率 1 收敛 . 
b) 设 级 数 а 以 概率 1 收敛 , 则 由 (6) RA, 对 于 充分 大 的 n, 有 


P 人 aas 一 Sn| > e} < r (7) 
к>1 2 
由 (3) R, 有 К 
Р КОШ - Sal > e} >1- (622. 
к Ува 
к=п 


从 而 , 如 果 满 足 > Её = оо, 则 
=1 


Р {ыва - Sa] > e} = 
k>1 


而 这 与 (т) 式 矛 盾 . o 

$ 如 果 2,5... 是 独立 同 分 布 伯 努 利 随机 变量 序列 ，P{e = +1) = 
Pf{én = -1} = 1/2, 则 级 数 Snan(lan| < с) 以 概率 1 收敛 , 当 且 仅 当 У ал < оо. 

2. “两 级 数 ” 定 理 

定理 2 ( 柯 尔 莫 戈 洛 夫 — 辛 钦 “两 级 数 ” 定 理 ) ”独立 随机 变量 的 61,62,… 的 
RAEE 以 概率 1 收效 的 充分 条 件 是 , 两 级 数 Ес, 和 Din 同时 收敛 . 并 且 ， 
如 果 对 于 某 个 c> 0,P{len| < с} = 1(п > 1), 则 此 条 件 也 是 必要 的 . 

证 明 如 果 ОЕ, < оо, 则 根据 定理 1, 级 数 (6, — Е&„) 以 概率 1 收敛. 因 
为 根据 假设 级 数 У Ее, 收敛 , 所 以 级 数 E En 也 以 概率 1 收敛 . 

为 证 明 必要 性 , 利用 “对 称 化 ” 方法 . 与 1,62,… 同时 , 考虑 依赖 于 它 的 独立 随 
机 变量 序列 1,2», -.-, 其 中 E 与 &(п > 1) 同 分 布 . (假如 原 基本 事件 空间 是 充分 


52. 级 数 的 收敛 性 "u 





“丰富 ”的 , 则 由 第 二 章 89 定理 1 的 系 1, 可 见 这 样 序列 的 存在 性 . 同时 , 可 以 证 明 
此 假设 并 不 失 普遍 性 ). 

那么 , 如 果 级 数 En 以 概率 1 收敛, ДНЯ УЕ, 以 及 级 数 EEn 一 总 ) 也 以 概 
率 1 收敛 . T Eln - En) =0 H P{lén -Enl < 2с} = 1. 所 以 由 定理 1 的 命题 b) 知 ， 
У0(6, - En) < оо. 此 外 ， 


Уре, = 3 JE Dln -&) < o. 


因此 , 根据 定理 1 的 命题 a) , 级 数 > (En — Ес.) 以 概率 1 收敛 , 说 明 级 数 ус ЕЕ, 也 
收敛 . 
于 是 , НР Ус, 以 概率 1 收敛 , 可 见 (在 假设 Р{|&„| < с} = 1(n > 1) F) 
ВЕ, 和 De 也 同时 收敛 . п 
з. “=” Е 
下 面 的 定理 , 在 没有 关于 随机 变量 有 界 的 假设 条 件 下 , H Т Е, 以 概率 
1 收敛 的 充分 和 必要 条 件 . 
对 于 某 个 常数 c 设 





= & Else 
0, #&>с. 
定理 3 ( 柯 尔 莫 戈 洛 夫 “ 三 级 数 ”定理 ) йа, 是 独立 随机 变量 序列 . 
АЖ 以 概率 ФАА 对 于 任意 c > 0, 三 级 数 


Уес, Уре, у Р{ >} 


Жж, 并 且 三 级 数 对 于 某 个 c > 0 ж, 是 级 数 ус: 以 概率 1 收 化 的 充分 条 件 . 

证 明 (1) 充分 性 . 根据 “两 级 数 ”定理 , 级 数 уссс 以 概率 1 收敛， 而 如 果 对 
FRA c> 0, 并 Pi 人 | > с} < оо, 则 根据 博 雷 尔 - 坎 泰利 引 理 ,以 概率 1 级 数 
江 T{l&n| > c} < оо, 说 明 对 于 一 切 п (只 可 能 有 有 限 个 可 能 除外 ), 有 En = сс. 因此 ， 
级 数 Уе, 也 以 概率 1 收敛 . 

(2) 必要 性 . 如 果 级 数 Е, 以 概率 1 收敛, 则 以 概率 1 &, 一 0, 故 对 于 任意 
сє > 0, 以 概率 1 最 多 有 有 限 个 事件 {len| > с} ШЖ. 因此 , 以 概率 1 有 ЦЕ > 
с} < оо, 且 根 据 第 二 博 雷 尔 - 坎 泰利 引 理 УСР{|&„| > с} < оо. 此 外 , НА D En 
收敛 , 可 见 级 数 у`& ак. 于 是 , 根据 “两 级 数 ”定理 , 两 个 级 数 Есе 和 Ыр 
都 收敛 . 

Я Riin 是 独立 随机 变量 , Н 了 6n = 0. ЖА, 如果 


ё 
Ув <® 





则 级 数 > En 以 概率 1 КЖ. 
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为 证 明 此 结果 , 我 们 注意 到 ， 





Ув <> DBRN] < D+ ele > < . 











此 ,如果 EL = Enl (lEn! <1), 则 
УЕ)? < о. 





由 于 Её, = 0, 可 见 


Уве = УЕ, (Enl < DI = УЕ > DI 
<У вые, > 1) < о. 


Я У ЕЕ 和 ус Ре 都 收敛 . 此 外 , 根据 切 比 雪夫 不 等 式 , 有 
P{lén| > 1} = Р{|6. 11011 > 11 > 1} < Е > 1). 


因此 , Р{| „| > 1} < оо. FE, 由 “三 级 数 " 定理, И Y En 以 概率 1 收敛 . 

4. 练习 题 

1. Ба, 5... 是 独立 随机 变量 序列 , Sa = & + … +. 利用 “三 级 数 ”定理 ， 
证 明 : 

а) ША Е 以 概率 1 收敛, 则 级 数 УЕ, 以 概率 1 收敛 , 当 且 仅 当 级 数 
E ЕЕ] < 1) ЖЖ. 

b) 如 果 级 数 Е, 以 概率 1 收敛 , 则 级 数 ус сї 也 以 概率 1 收敛, 当 且 仅 当 


УЕ < 1) < ©. 
2. 设 61,62,… 是 独立 随机 变量 序列 , 证 明 级 数 并 如 以 概率 1 收敛, 当 且 仅 当 


= 
L Erg <=. 


3. 设 6,6a,…… 是 独立 随机 变量 序列 , 证 明 如 下 三 个 条 件 等 价 : 

а) AME En 以 概率 1 收敛 ; 

b) 级 数 у: ВО 

с) Я E En 依 分 布 收敛 . 

4. 举例 说 明 , 在 定理 1 和 定理 2 中 , 一 般 不 能 去 掉 一 致 有 界 性 条 件 : 对 于 某 个 
сє>0,Р{|&һ| < с} = 1(n > 1). 

5. 设 &1,€2,.… 是 独立 同 分 布 随机 变量 , В Et =0,Е& < оо, Sn = E1 + tEn 
证 明 如 下 柯 尔 莫 苞 洛 夫 不 等 式 (2) 的 单 侧 类 似 (马尔 沙 尔 [A. В. Марщалл)): 


ES? 
гв. >} < аер 
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6. 设 &,62,… 是 (任意 ) 随机 变量 序列 .证 明 , ШЖ у; ЕЕ, < оо, 则 级 数 
п>1 
У 以 概率 1 绝对 收 全 
тва, 是 独立 对 称 分 布 随机 变量 . 证 明 


Е (E ^ | < Уве ^1). 


8. 设 &1,62,… 是 具有 有 限 二 阶 矩 的 、 独 立 随 机 变量 ， 证明， 当 且 仅 当 级 数 
E Ес, 和 У Ос, 收敛 时 , 级 数 УЕ 在 12 Чи. 

9. 设 61,62,… 是 独立 随机 变量 , 级 数 E En 几乎 必然 (处 处 ) 收敛. 证 明 , 该 级 
数 的 值 几乎 必然 与 项 的 求 和 顺序 无 关 , 当 且 仅 当 D Eln; lnl < D)| < оо. 

10. 设 &1,62,… 是 独立 随机 变量 , Н Ес, = 0 (n > 1), 而 


D EERIE] < 1) +160161 > 1)] < әо. 


п=1 
证 明 级 数 55 6, (Р ас) 收 化 


11. An 42,… 是 独立 事件 , 满足 : Р(А„) > 0(n > 1), Ў Р(А„) = оо. 证 明 当 
п=1 
т > оо 时 ,有 


Ука) / УЈР(А;) 1 (Р-ас.. 
j=1 j=1 
12. 设 61,62,… 是 独立 随机 变量 , 其 数学 期 望 为 BE 和 方差 o2 WE: lim Ben = 
с, № Ў ор? = оо. ШВУ п — оо 时 ,有 
п=1 


24/2- (Р –а.с.). 
j=l Ij/ j=l i 
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1. 坎 泰 利 强大 数 定律 ” 设 &1,&2,… 是 具有 有 限 二 阶 矩 的 独立 随机 变量 序列 ， 
& + +&. 根据 第 三 章 53 练习 题 2, 如 果 方 差 DE 一 致 有 界 , 则 大 数 定律 成 


Sn — Е5„ 
п 


Sn = 
№; 

2,0, п о. (1) 
强大 数 定律 ”如 果 将 (1) 式 中 的 “ 依 概率 收敛 ” 换 成 “以 概率 1 收敛 ”, 则 相应 


的 论断 称 做 强大 数 定律 . 
下 面 的 定理 , 是 强大 数 定律 最 早 的 结果 之 一 
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定理 1 KRH) Ж. 是 具有 有 限 4 阶 矩 的 独立 随机 变量 ， 且 对 于 某 
个 常数 C, 有 
Еј, — Etnl <C, п>1. 


那么 , 5 п 一 oo 时 , 有 
SES, —0, (P-ac.). (2) 


证 明 不 失 普 遍 性 , 可 以 认为 Efn = 0,n > 1. 根据 第 二 章 О 定理 1 的 系 , 为 
使 Sn/n 一 0 (Р-а.с.), 只 需 对 于 任何 = 0, 有 


У» 5 > e} < оо. 
同样 地 , 由 切 比 雪夫 不 等 式 , 为 满足 上 述 不 等 式 只 需 满足 条 件 
„|5 |* 
УЕ 


现在 证 明 , 在 定理 的 条 件 下 该 不 等 式 确实 成 立 . 
易 见 ， 








< оо. 








Z 4! „2 4! 
(+) = У +075186 + У те 
i=l ыг ај 


i<j 放大 
j<k 
+5 seatt У пб: 


i<j<k<l 
由 于 Е& = 0,k < п, 故 由 此 可 见 
Е5 = Ув +6 >: ЕСЕ? < єў. ЕЕ 
ij=1 


БӘ. 


ИС = (3n? — 2n)C < Зп2С. 


SnC+ "ат 


从 而 К , 
Ув(5) «зс У) <. о 
2. 强大 数 定律 的 柯 尔 莫 戈 洛 夫 准 则 ” 若 引进 更 加 精细 的 方法 , 则 可 以 本 质 上 减 
PERI 关于 强大 数 定律 成 立 的 条 件 . 


定理 2 ( 柯 尔 莫 戈 洛 夫 )@ H &1,62,… 是 具有 有 限 二 阶 矩 的 独立 随机 变量 序 
Я], 而 bn 是 满足 如 下 条 件 的 正 数 : bn 1 co 且 


=n < оо. (3) 


外 该 定理 亦 称 做 强大 数 定律 的 柯 尔 莫 戈 洛 夫 准则 . 一 一 译 者 
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ЖА, 
5, =. —0, (Р-ас.). (4) 
特别 , 如 果 
< ® 
я 
5, — Е5ь —0, (Р-а.с.). (6) 


п 
定理 2 和 下 面 定理 3 的 证 明 , 要 用 到 两 个 辅助 命题 . 
引 理 1 ( 特 普 利 茨 [0. Toeplitz]) i (an)n>! 是 非 负 数列 , bn = ЭС = 
а > 0, А bn Тоо, п 一 00; 设 (Zn)n>1 是 收效 于 某 一 实数 工 的 数列 . ЖА 


к Угар а (7) 
j=1 
特别 , 如 果 an = 1, 则 
aiiis әт, пәоо. (8) 
证 明 їйє > 0 Ж по = nole) WE: ЖЕ n > по, |с, —т| < =/2. 选择 nl > по, 
使 
E Eol -z| <; 


т 
Ja 


因此 , 对 于 m > n, 有 








1 
Dow- Sms -z| 
n jel а 
| 
= У; 21+ L УС ајшу-а| 
"у= =по+1 
A 
< E Sale; -a+ >) в 
ma jal n ј=по+1 


Е є. – Ба 
вы 

引 理 2 (ЖЕНЯ [L. Кгопескег]) Ж (bn)n>1 是 正 实数 的 递增 数列 ， 并 且 
bn | ооп 一 оо; 而 (Znjn>l 是 使 级 数 Ут, 收敛 的 菜 一 实数 列 . ЖА, 





<=. О 


n 
У >o, п > со. 


特别 , 如 果 bn = п, т, = yn/n АЖ у yn/n ЖЖ, 则 


ntoto 
n 


—0, п оо. (9) 
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证 明 #һ=0,$% =0,5„ = Ух, ЖА CARRA), 有 
ј=1 


У 02; = `5у(5) — 51) = bnSn – boSo — У Sj-1(b; — bj-1), 
ж ж я 
B aj = bj — 01.4 
1 < 1 
Е Уьш; = Sn 一 T 2 Siia = 0, 
n ј=1 nj=1 


因为 车 Sn 一 т, 则 根据 特 普 利 茨 引 理 , 有 
ЭС >r. o 
п 4 
定理 2 的 证 明 因为 
5. -Е5„ _ 1 Š 处 一 EEk 
тЫ к» ( а 


则 根据 克 罗 内 克 引 理 , 为 使 (4) 式 成 立 , 只 需 级 数 Y (E — ЕЕ») к АЖ 1 收敛. 实 
际 上 , 由 于 条 件 (3) 和 $2 的 定理 1 知 , 该 级 数 确实 收敛 . 
例 1 Ша, 5... 是 独立 伯 努 利 随机 变量 序列 , 且 P{&n = 1} = P{en =-1} = 
1/2. ЖА, 由 
У <œ, ШИ, Ж 50 (Рас). (10) 
3. 独立 同 分 布 随机 变量 的 强大 数 定律 ”对 于 随机 变量 5l,62,… 不 但 独立 , 而 
且 也 同 分 布 的 情形 , 为 使 强大 数 定律 成 立 , 没有 必要 像 定理 2 НЗ MEAE, 
只 需要 求 一 阶 绝对 甜 存 在 . 
定理 3 ( 柯 尔 莫 戈 洛 夫 ) ЖЕ... 是 独立 同 分 布 随 机 变量 , Н El&1| < ос. 
那么 ， 
5 эт (Р-ас.), (11) 
RP m= Egi, Sn = & + + En 
定理 的 证 明 用 到 下 面 的 引 理 . 
5183 设 6 是非 负 随机 变量 , 那么 ， 


Me 


P{£ >n} < ВЕ < 1+) P{E >п}. a2) 
n=l 


n=1 
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引 理 3 的 证 明 . 下 面 的 一 系列 不 等 式 即 可 证 明 引 理 3: 


Ўрк>н У р{к<е<к+1}= Усен 
k= 


п=1 к2п 


„Ërec ўва eect 
озы о 
k=l 


„ноаник н>. o 


= nt 
定理 3 的 证 明 由 引 理 3 和 博 雷 尔 - 坎 泰 利 引 理 (第 二 章 510), 可 见 
ЕС < œ & JO P{l&i| > n} < œ = у Р{ | > п} < оо 
e УРРА n, lén] >n} =0. 
因此 , 以 概率 1 对 于 一 切 п (NARA n 有 可 能 除外 ), 有 161 < п. 
记 


= Је, <, 
т f Kal >n, 
且 对 于 п > 1, АЖ Ес, = 0. ЖА, 


а 


п 


注意 , 一 般 БЕ, #0, 但 是 


= 0, п 一 oo( 了 一 a.c.) & tt — 0, п > 00(P— a.c.). 


ЕЁ, = ЕЕ, ЦЕ, < п} = Е& ЦЕ < п} > Eé = 0. 
因此 , 由 特 普 利 茨 引 理 , 有 
EE n= o, 
因而 


名 十 十 名 





0, п оо(Р —а.с.) 


È- EÈ) +...+ (6, Её) 
п 
记 2, = 2, - ЕЁ. 根据 克 罗 内 科 引 理 , 为 证 明 (13) 式 成 立 , 只 需 证 明 级 数 
УГЕ, т 以 概率 1 收敛. 而 且 由 82 定理 1, 为 此 只 需 证 明 假设 的 条 件 Б < co 可 
шж у: ЮЕ„/п2 ВК. 





0, п оо(Р-а.с.). (13) 
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下 面 一 系列 不 等 式 恰好 证 明 这 确实 成 立 : 


S% < 88 m — ве < у? 


n=l 


= У REIRI <) = S4 LBG- 1< Kil <) 
ЕЁ 


1 n=l 


=J EIk -1< KAE < E[E?I(k — 1 < |&| < k)] 


k: n=k 
«оўва -1< < = 28| <. п 
К=1 
Жі 在 如 下 的 意义 上 , 定理 的 逆 命 题 也 成 立 : B Ei 是 独立 同 分 布 随机 
变量 序列 , 且 以 概率 1 满足 


аъ o 


п 
其 中 C 是 某 一 (有限 ) 常数 . ЖА, ЕЕ < © H C = Eg. 
事实 上 , 如 果 5,/п 一 C(P -а.с.), W 


е3. (21) oe -ae 


n n n- 





从 而 , PITERA n, lén) > п} = 0. 根据 博 雷 尔 - 坎 泰 利 引 理 (第 二 章 по), 且 由 
引 理 3 МЕ < co ,有 Е 
УРЦ > п} < о. 


п=1 
那么 , 由 已 经 证 明 的 定理 , 可 见 С = Eg. 
于 是 , 对 于 独立 同 分 布 随机 变量 , 条 件 Ele] < оо Ж (以 概率 1) KAFA RE 
R Sn/n 的 充分 和 必要 条 件 . 
Жо ”如 果 数 学 期 望 m = Ес, FE, BERVAR, 则 定理 的 断定 (9) 仍然 成 


Ў. 
事实 上 , 例如 , 5 ЕЕ; < оо, EE} = оо. X} C > 0, 设 
= J Glé: < С). 
=1 
ЖА, 以 概率 1, 有 
Я 5С 
lim- > шъ = E&I(& < С) 


由 于 当 C 一 co 时 ,有 
Е&\1(& < С) — Е& = оо, 
可 见 S/n 一 +o0(P ас). 
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ЖЗ 定理 3 断定, 5„/п 一 mm(P 一 a.c.). 需要 指出 , 这 里 除 以 概率 1 收敛 之 外 ， 
平均 收 仇 也 成 立 : 


SaL, m, Е 
ЕЗ 





5, 
S ао, п — оо. 
п 


关于 这 一 点 , 由 第 五 章 $3 的 遍历 性 定理 3 的 可 以 得 到 . 不 过 , 对 于 现在 的 独立 同 分 
布 随机 变量 &1,€2,… (Sn = 61 十 … + En) 的 情形 , 可 以 直接 证 明 (练习 题 7), 而 无 须 
借助 于 遍历 性 定理 . 

а. 应 用 强大 数 定律 的 例 现在 考虑 强大 数 定律 的 某 些 应 用 . 

$] 2 (用 于 数论 ) RO= [0,1),. 罗 Жо 的 子 集 的 o- 代数 ,而 了 是 区 间 |0,1) 
上 的 勒 贝 格 测度 . 考虑 数 w < Q 的 二 进 制 分 解 w = 0. ww ( 含 无 限 多 个 0), 定义 
随机 变量 61(w),é2(w),… ,其 中 tn(w) = ш. 对 于 任意 n> 1 和 任意 只 取 0 或 1 为 
值 的 z1,… ,zn, 有 





{ш :&(ш) =z ,& (ш) = тп} 
- {0:9 ны <о< F ++. + aeih 
则 该 集合 的 P- 测度 等 于 1/2". 说 明 EE 是 独立 同 分 布 随机 变量 序列 , Н. 
р =0) =Ре=1 = 5. 
由 此 和 强大 数 定律 得 如 下 博 雷 尔 的 结果 : 区 间 (0,1) 的 几乎 一 切 数 按 如 下 意义 都 是 
正规 的 : 其 二 进 制 分 解 中 “0 的 比率 ”和 “1 的 比率 ”各 以 概率 1 趋向 1/2, Вр. 
е zis 3 (Рас). 


例 3 (应 用 于 “蒙特 卡 罗 法 ”) ” 设 f(z) 是 定义 在 区 间 [0,1] E. WEF [0,1] 的 
连续 函数 . 下 面 的 讨论 基于 积分 用 f(z)dz 的 数值 计算 的 统计 方法 (“蒙特 卡 罗 法 ”). 
ат, вт»: 是 独立 同 在 [0,1] 上 均匀 分 布 的 随机 变量 序列 ; 而 


> Ыы E JE) >m 
10, Æ E) <m 


ER, i 
Ер = P{f(&1) > m} = J адаг. 
由 强大 数 定律 (定理 3), 有 


„л 5 [ Кат (Р-ас). 
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这 样 , 积分 fy f(z)dz 的 数值 计算 , 可 以 利用 随机 数 偶 (6, n) i > 1, 模拟 , 再 计 
Жо пт! эү 的 值 来 实现 . 
例 4 (更 新 过 程 的 强大 数 定律 ) WN = (М) 是 第 二 章 89 第 4 小 节 引 进 的 
更 新 过 程 : _ 
м= DO ЦТ, <t), Ta=01 + on, 


п=1 
其 中 01,02,… ,on 是 独立 同 分 布 正 值 随机 变量 序列 . 此 外 , 假设 и = Ес. < оо. 
在 这 样 的 假设 条 件 下 , 过 程 N 服从 强大 数 定律 : 








т Б (P –а.с.), #— оо. (14) 
为 证 明 这 一 结果 , 首先 由 于 Ту, <t < Tw,+1(t > 0), 可 见 在 假设 М, > 0 的 条 件 下 ， 
不 等 式 m Е i 
м, t Nitl 
ача (1+2) п 
成 立 


显然 , МЕ oo М, = Ni(w) 一 оо (Р 一 a.c.). 同时 , 根据 定理 3, 41 一 oo 
时 , 有 ‚ 
ъ0) = altta) Si Esae 
因此 , 同样 , 有 
Trw lw) 
№4) 


从 而 , 由 (15) 式 , 可 见 存在 极限 : 


ән, (Р-а.с.), n—> оо, 


t 


м, = и (Р-а.с.). 


аз 
于 是 , 强大 数 定律 (14) 得 证 . 
5. 练习 题 
1. 证明 Её? < оо, 当 且 仅 当 


> 站 >n} < оо. 

п=1 
2. 假设 &1,€2,… 是 独立 同 分 布 随机 变量 , 证 明 : 
(а) 若 对 于 某 个 0<a < 1, 有 ЕЕ < оо, 则 5„/п!/® 一 0(P —а.с.). 
(b) 车 对 于 某 个 1< 8<2, # Е а < оо, 则 


Sn —пЕ& 


a 0 (Р-ас.). 
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3. 设 &1,&2,… 是 独立 同 分 布 随机 变量 序列 , Н. El&1| = оо. 证 明 , 对 于 任意 常数 
序列 {an}, 有 





в = а. = (Р-а.с.). 
п п 


4. НБ (0,1) 上 的 一 切 有 理 数 (在 第 4 小 节 例 2) 是 否 都 是 正规 的 ? 

5. 举 一 独 立 随机 变量 序列 &1,€2,… 的 例 , 说 明 极限 lim Sn/n 在 依 概 率 的 意义 
下 存在 , 但 是 在 以 概率 1 的 意义 下 不 存在 ， 

6. ( 埃 特 麦迪 [N. Etemady].) 证 明 , 如 果 将 随机 变量 &1,€2,… “独立 ” 换 成 “两 
两 独立 ”, 定理 3 的 结论 仍然 成 立 . 

т. 证 明 . 在 定理 3 的 条 件 下 , 平均 收敛 成 立 : 





| 0, п» оо 
8. Та, 62, --- 是 独立 同 分 布 随机 变量 序列 , Н Е < оо. ШЕВ, 
пра! > 209) 0 和 Jy mexe 850. 
9. 考虑 区 间 |0, 1) 上 数 w = 0.w1w2… 的 十 进 制 分 解 . 
(а) 将 第 4 小 节 对 于 二 进 制 分 解 的 强大 数 定律 , 移植 到 上 面 二 进 制 分 解 的 情形 . 


(b) 证 明 , 有 理 数 ( 按 博 雷 尔 ) 不 是 正规 的 , 即 对 于 有 理 数 的 十 进 制 分 解 (Elw) = 
wkk > 1), 对 于 任意 ;= 0,1,… ,9， 





n 1 
1 2 Kew) = = g (Р-ас). 


(с) МЕНЯ, Ж w = 0.12345678910111213..., 其 中 在 小 数位 上 依次 写 的 是 一 切 非 
负 整 数 , 是 正规 的 ( 见 例 2). 
10. (a) 设 &1,&2,… 是 独立 随机 变量 序列 , НОР{&„ = Ene} = 1/2. 证 明 , 这 一 
随机 变量 列 服从 大 数 定律 , 当 且 仅 当 a < 1/2. 
(b) 设 f = f(z) Я (0, оо) 上 的 有 界 连续 函数 . WEH, 对 于 任何 а > 0 与 一 切 
т>0, 6% A Ө 
АУ (= + =) = ani = f(z +a). 


11. 证 明 , 可 以 赋予 柯 尔 英 蕊 洛 夫 强大 数 定律 (定理 3) 如 下 形式 : 设 &1,62,… 
是 独立 同 分 布 随机 变量 , 则 
Blal < co > п-15, 一 EE (Рас), 


Е|&| = œ © mn 1$, = +оо (Р-а.с.). 


证 明 , 如 果 将 “独立 ” 换 成 “两 两 独立 ”, 则 第 一 个 结论 仍然 成 立 . 
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12. 设 &,&›,--- 是 独立 同 分 布 随机 变量 序列 . 证 明 ， 
En 


Esup = < oo © Е|&|1п* |.| < оо. 
п 








13. 设 Sn = 6 ++ Enn > 1, 其 中 假设 6,&2,… 是 独立 同 分 布 随机 变量 序 
列 , В E& = 0,El&| > 0. 证 明 


га ТЕА ш эз 200 (Ре) 


14. 5, =& + +&,п >1, 其 中 设 61,62,… 是 独立 同 分 布 随机 变量 序列 . 
证 明 . 对 于 任意 a (0,1/2], 下 面 的 性 质 之 一 成 立 : 

(а) п7®$„ 一 оо(Р — а.с.); 

(b) п", 一 —оо(Р 一 a.c.); 

(с) їтт 95, = œ, limn~® Sn = —оо,(Р – а.с.). 

15. 5. = & + H Enn > L, So = 0,61,62,… 是 独立 同 分 布 随机 变量 序列 . 
证 明 : 

(а) 对 于 任意 = > 0, 


DP{lSn| > пе} < оо + Е = 0, E£? < оо; 


n=1 


(b) ШЖ. Бє, < 0, 则 对 于 p> 1, 
-1 
E (as) < oo & E(t)? < оо; 
n>0 
(с) 如 果 Ес, = 0,1 < p < 2, 则 对 于 某 个 常数 Cp, 
> Р паха, > n} < CpEléil?, LE {вах |Sk| > n} «СЕ; 
(d) ЖЖ Ес, = 0, E£? < оо Н М(=) = sup(Sn —пє),є > 0, W 


2 
N\ с 
lim eM(e) ==. 


84. ENKER 


1. 辅助 函数 : 上 函数 和 下 函数 ” 设 &1,é2,.… 是 独立 同 分 布 伯 努 利 随机 变量 序 
列 , 其 中 P{& =1}=Р{& = -1}= 1/2,Sn = & + tEn 由 31 定理 2 的 证 明 ， 
可 见 
Ша—= = 一 oo. @) 
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另 一 方面 , 根据 83 的 (10) 式 , 有 





ы 一 0 (Р-ас.). (2) 
现在 比较 这 两 个 结果 . 

由 (1) 式 可 见 , 轨道 (5,),>1 以 概率 1 无 限 多 次 与 “曲线 ”+eVn 相交 , 其 中 < 
是 任意 正 数 . 但 是 , 与 此 同时 由 (2) RTL, 只 有 有 限 多 次 越 出 有 界 曲线 +eViilnn 
所 围 成 的 区 域内 部 . 这 两 个 关于 对 称 随机 游 动 (Sn)>1 振荡 “幅度 ”特点 的 结果 , 提 
供 了 相当 有 用 的 信息 . 下 面 引进 的 重 对 数 定律 , 本 质 上 更 精确 地 说 明了 关于 随机 游 动 
(Sn)nz1 振荡 “幅度 ”的 概念 . 

首先 引进 上 函数 和 下 函数 的 概念 . 

定义 函数 = yp*(n),n > 1, (HF ($,).>1) 称 做 上 函数 , 如 果 自 某 个 n= 
по(ш) 开始 对 于 一 切 п, 以 概率 1 有 5, < yp*(n). 

ЮС р. = yp.(n),n > 1 (对 于 (Sn)nz1) 称 做 下 函数 , 如 果 对 无 限 多 个 п, 以 概率 
1 有 Sn > $. (п). 

根据 这 一 定义 , 由 (1) АЖ (2) АНЯ, 每 一 个 函数 p* = eVnlnn(e > 0), (对 于 
(Sn)n>1) 是 上 函数 , 而 函数 p, = eVn(e > 0) 是 下 函数 . 

设 y = у(п) 是 某 个 函数 , 而 p: = (1+e)p,pse = (1 一 e)y, Ф => 0. ЖА, Я 


— Sn | Sm 
wiola 
Е ЕЗ (т) 1+8, 对 于 一 切 。 > 0 和 某 个 me 
Ф {Sm < (1+e)p(m) 对 一 切 e > 0 和 自 某 个 ma(e) 始 的 一 切 mm}，(3) 


{шшш >} = {е [эрш] > 


>1-e, 对 于 一 切 e > 0 和 某 个 чө} 






































7 E plm) * 
= {Sm >(1—є)ф(т) Х- => 0 MAHA пз(є) > п2(=) 始 的 无 限 个 т). (4) 


由 (3) RA (4) 式 可 见 , 为 验证 每 一 个 函数 р] = (1+ е), є > 0, 是 上 函数 , 需 
要 证 明 : 
Я р 
Р {йш «1-1 (5) 
而 为 证 明 每 一 个 函数 p. = (1 一 sp,s > 0 是 下 函数 , 需要 验证 : 


p (ime > 1}= 1. (6) 
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2. 重 对 数 定律 
定理 1 ( 重 对 数 定律 ) 设 61,€2,… 是 独立 同 分 布 随机 变量 序列 , Н Eg = 0, 
ЕЁ? =o?>0. ЖА, 
p {шо = 1} -ь (т) 
其 中 
y(n) = V20?nlnlnn. (8) 


对 于 一 致 有 界 随机 变量 , 1924 ЕЕН #4КШЕНЯ Т ERRE. 1929 年 柯 尔 莫 戈 洛 
夫 将 这 一 结果 , 推广 到 广泛 的 独立 随机 变量 类 . 在 定理 1 所 表述 的 条 件 下 , 1941 年 
由 哈 特 曼 (Р. Hartman) 和 温 特 纳 (А. Wintner) 证 明了 重 对 数 定律 . 

由 于 该 定理 的 证 明 相 当 复 杂 , 故我 们 仅 限 于 考虑 其 特殊 情形 , 即 随机 变量 с, 服 
从 正 态 分 布 的 情形 : en ~ М(0,1),п > 1. 

首先 , 证 明 两 个 引 理 . 

引 理 1 да, ,En 是 独立 随机 变量 , 且 有 对 称 分 布 : 对 于 每 一 个 事件 B є 
(К), Е < п, ж Р{& € В} =Р{—& E B}. 那么 ,对 于 任意 实数 % 有 


5, 9 
Р {se Sk > a} < 2Р{5„ > а}. (9) 


证 明 引进 记号 : Ar = {S; < a,i < k- l; Sk > a}, A = {зв 5. > 中 = 
{Sn > а}. НЕ А8 2 А (5 > Sk} E, А 


Р(ВПА») > Р(АкГ{ 5, > Sk}) = Р(Ак)Р{5 > Sk} 
= Р(Ак)Р{&к+1 + + En 70}. 


由 于 随机 变量 &1,… ,én 的 概率 分 布 对 称 , 有 
Р{& ы + + En > 0} = Р{ф ы + + En < 0}. 
因此 Р{&к+ы ++ En 20} > 1/2, 从 而 


P(B) > DP(AiNB) > 5 УР(А) = 3P(4)， 
k=1 k=1 


于 是 (9) REHE. (对 照 第 八 章 82 第 3 小 节 的 证 明 .) О 
3182 it Sn ~ М№(0,0?(п)), о? (п) Т оо, 而 数 a(n),n > 1, ЖА а(п)/о(п) 一 


оо, п 一 оо. ЖА 





PAS, > н) 067890, ао) 
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证 明 由 于 当 z 一 oo 时 


1 [а 1 
zl ео: Irr 
而 5„/о?(п) ~ N(0,1), 立即 可 得 (10) R. 
证 明定 理 1 现在 证 明 5 ~ N(0,1) 的 情形 . 假设 &; ~ N(0,1). 
(а) 首先 证 明 (5) 式 . 设 = > 0, 入 = 1+enk = Л, 其 中 大 > ko, 且 选 择 ko, 使 
lnln ko 有 定义 . 记 
Ак = {Sn > А№(п), РЖ п є (nk, пы}, (11) 


亦 设 
А = {4k， 对 无 限 多 个 К} = {Sn > My(n), 对 于 无 限 多 个 п}. 
由 于 (3) R, 为 证 明 (5) R, 只 需 证 明 P(A) = 0. 
为 此 证 明 D P(Ax) < оо. 根据 博 雷 尔 - 坎 泰 利 引 理 (第 二 章 10), 有 P(A) =0. 
由 (11),(9) 和 (10) 式 , 有 


P(4k) < P{Sn > Xy(nk)， 对 于 某 个 me (пк, nki} 
S P{Sn > XW(nk)， 对 于 某 个 mm < neyi} < 2P{Sn > XyW(nk)} 





мөзү? 
2 eie) < Cue-AinmX < Coe-Aink — ОКА, 
— А (пк) 
Ут 
ук 


其 中 с, 和 C2 是 常数 . 由 于 р КА < оо, Ж У P(A) < оо. 
=l 

这 样 , (5) 式 得 证 . 

(b) 其 次 , 证 明 (6) 式 . 根据 (4) R, 需要 证 明 对 于 和 = 1 一 e,s > 0, 以 概率 1 对 无 
ШЕЛ n, 有 Sn > Mw(n). 现在 将 已 证 明 的 (5) 式 用 于 序列 (-Sn)n>l 则 有 可 能 除 有 
RA n 的 值 之 外 的 一 切 n, (Р —а.с.), 有 -Sn < 24(п). AT, 如 果 nk = N*,N > 1, 
则 对 于 充分 大 的 k, 有 

52.1 > —2ф(пк-1), 
或 
Sn > Yk — 2ф(пк-1), (12) 
ЖОР У, = Sm – Sni- 
因此 , 如 果 证 明了 , 对 无 限 多 个 k, 


Үк > (пк) + 24(пк-1), (13) 
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则 这 连同 (12) 式 可 以 证 明 , 对 于 无 限 多 个 k, 以 概率 1 有 Sn, > Xy(nk). WE 
个 Ne (和 ,1). ЖА, FE N > 1, 使 对 一 切 К, 
А208 — №) мр? 
> A(2N* In In N*)Y/? + 2(2N*-l Inln МАТ) 
= АМ) + 24 (№). 


现在 只 需 证 明 , 对 于 无 限 多 个 к, 
Үк > N'[2(N* – №1) ша М2. (14) 
EHA, Ye ~ N(0, № — №). 因此 , 由 于 引 理 2, 可 见 


P{Yk > M2(N* 一 й 1) In In №2} 
a A’)? Inin № 
мил = In М) ° 
2、 С 
> ar 0 
因为 学 (klnk)-! = оо, 则 根据 博 雷 尔 - 坎 泰 利 引 理 的 第 2 部 分 , 以 概率 1 对 于 无 限 
ЖЛ k, (14) 式 成 立 . 于 是 关系 式 (6) 得 证 . 
(с) 由 (5) АЖ (6) 式 , 立即 得 所 要 证 明 的 (т) R. 口 
注 1 将 (7) 式 用 于 随机 变量 (-5,)n>1, # (P 一 a.c.) 





mm 2-1 (15) 
由 (7) 和 (15) 式 可 见 , 重 对 数 定律 亦 可 表示 为 如 下 形式 : 
p {йиш п) -1} ==}. (16) 


#2 重 对 数 定律 说 明 , 对 于 任意 = > 0, 每 一 个 函数 好 = (1 + e)w WEER 
数 , 而 函数 у: = (1-=)ф 是 下 函数 . 
重 对 数 定律 的 结论 7 与 下 面 的 关系 式 等 价 : 对 于 任意 。 > 0, 
PI{|Sn| > (1- =)y%(n)， 对 于 无 限 多 个 п} =1, 
Р{|5»| > (1+=)4$(п), РЕШ п} = 0. 


з. 练习 题 
1. 设 &1,&2,… 是 独立 随机 变量 序列 , В в, ~ N(0,1). 证 明 


А 6 
P {калк -1} 1 
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2. 设 6&1,62,… 是 独立 随机 变量 , 服从 参数 为 和 > 0 的 泊 松 分 布 . 证 明 (与 无 


关 ) 
Р {кчт = 1} =1. 
3. Ба, é2 是 独立 同 分 布 随机 变量 序列 , 其 共同 的 特征 函数 为 


Eet =е М", 0<а<2. 


Р а Ts = ee =1. 


4. 证 明 不 等 式 (9) 的 如 下 推广 的 正确 性 . В 61,… ,én 是 独立 随机 变量 ,So = 
0, Sk = & 十 … +, 则 对 于 任意 实数 a, 列 维 (P. Р. Lévy) 不 等 式 成 立 : 


证 明 





Р {ss +A(Sn — 8%)] > a) < 2Р{5„ > а}, 
其 中 ulg) 是 随机 变量 上 的 中 位 数 , 即 满足 下 列 不 等 式 的 常数 : 


P{é 2 1(0)} 5, РИ) > 2 


5. 设 &\,--- ,en 是 独立 随机 变量 , So = 0, Sk = & + … + Ek, 证 明 
(а) (Ж 4 题 的 补充 ) 


Р { тәк [Sk +05, — Sel > а} < 2015,1 > a), 
1<К<п 


其 中 uE) 是 随机 变量 的 中 位 数 . 
(b) 如 果 &1,… ,én 是 同 分 布 对 称 随机 变量 , Д] 
1 er-nPtlel>zj < ЗЕ max, lékl > 2} < <2Р{|5,| > =}. 
6. 设 6 ，… En 是 独立 随机 变量 , Н ЕЕ, = 0(1 < i < п), Sk = +... + 66, 证 明 
对 于 a> 0， 
P ES 8 > a} < 2P{S > a — Е|5„|}. 


7. 设 En ,如 是 独立 同 分 布 随机 变量 , В БЕ, = 0,0? = EE? < 00,5, =& + 
+ Ens l&i] < С(Р 一 a.c.),i < п. ЧЕ, 对 于 任意 0< xz < 2C-!, 有 


Bers* < ехр{271п2202(1 + тС)}. 


在 以 上 的 条 件 下 证 明 , 如 果 (an) 是 实数 序列 , 满足 an/Vn 一 co 而 an = о(п), 
则 对 于 任意 = > 0 和 充分 大 的 n, 有 


2 
Р{5. > an} > ep [- за +9} i 
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8. Ба, ,6n 是 独立 同 分 布 随机 变量 , Н ЕЕ; = 0,61 < СР -ac),i < 
ni Dn = У Юе. UEH, 对 于 Sn = &1 +-+ En НЕХ (IO. В. Прохоров) 不 
і=1 
等 式 : 








P{Sn > an} < exp {~£ arcsin т}, aeR, 


成 立 . 


85. 强大 数 定律 的 收敛 速度 和 大 偏差 概率 


1. 事件 的 频率 向 概率 的 收敛 速度 问题 现在 考虑 第 一 章 86 中 曾经 讨论 过 的 伯 
努 利 概 型 . 对 于 这 种 概 型 , 棣 葛 弗 - 拉 普 拉 斯 定理 给 出 了 标准 (正规 ) 偏差 |5n 一 np| > 
eyn 的 渐 近 式 , 其 中 标准 偏差 即 S, 对 中 心 值 np 的 偏差 量 级 为 vn. 同 是 在 第 一 章 
86 H, 还 对 所 谓 大 偏差 Sn — пр] > en 的 概率 作出 了 估计 , 即 Sn 对 np 的 п 级 偏差: 


Р{|® Эп -| >e) < 2672n a) 
( 见 第 一 章 86 М e 式 ). 由 此 当然 可 以 得 到 不 等 式 


2 2 
Salas) < bt -a >e} тое" 0) 


mèn 





P { вир 


т>п 





不 等 式 (2) 给 出 了 关于 “随机 变量 5,/п 以 概率 1 收敛 于 р 的 速度 ”的 一 定 印象 . 
现在 对 于 略微 一 般 的 情形 , 即 对 于 Sn = 6&1 +... + En 是 独立 同 分 布 随机 变量 之 
和 的 情形 , 讨论 形 如 (1), (2) 的 公式 正确 性 的 问题 . 
2. 强大 数 定律 中 的 收敛 速度 和 大 偏差 概率 称 随 机 变量 Е 满足 克拉 默 
(Н. Cramer) 条 件 , 如 果 存 在 0 的 邻 域 , 使 得 对 于 该 邻 域 的 任何 有 
Ee* < оо (3) 
(可 以 证 明 , 这 一 条 件 等 价 于 “概率 P{|é| > т} 以 指数 的 速度 下 降 ”.) 
设 
Ф(А) = Eexe，V(A) = Ine(A). (4) 
在 集合 
= {A € R: (А) < оо} (5) 
的 内 部 , 函数 (А) 是 止 (向 下 凸 ) 函数 , 且 无 限 可 微 . 这 时 
4(0) =0, %'(0) =т(= Ес), ф”(Х) >0. 


建立 函数 
H(a) = suplaA — 4(^)], a €R, (6) 
入 
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称 做 (随机 变量 © 的 分 布 函数 = Р(х) 的 ) 克拉 默 变换. 函数 Н(а) 也 是 止 函数 , 并 
BEA a= т 达到 其 最 小 值 0. 
如 果 a > т, Йй 
Н(а) = suplaX — ф(А)]. 
和 >0 


因此 


Р{ >а) < пе ве“ -а) 一 заре ew = о-на), (7) 
完全 同样 , 对 于 a < m, 有 Н(а) = зирјал — Ф(А)) 和 
P{é€ <a} <е Н®. (8) 
从 而 (对 照 第 一 章 86 的 (42) 式 ) 
P{lé€ — m| > =} < 2e MME (m-e), H+), (9) 


На, ,én 是 独立 同 分 布 、 满 足 克拉 默 条 件 (3) 的 随机 变量 , 5, = 6 十 … 十 
En, Wn(A) = авер {А5} wo) = ln Ее, 


Н»(а) = вир[аА = 4. (^), (10) 


则 
на) = nH (a) (= nsuplaà wan), 
入 


而 不 等 式 (7), (8) 和 (9) 有 如 下 形式 : 


{5% >а} <е-"Н@), а>т, a) 
Sn -nH(a) 

P а <е ‚ а<т, (12) 

Sn _ "| > e} < 2e- min{H (m-e), H(m+e)}xn, a3) 


p [|5 





#1 Жш N n| К ) ЛА... P 


Р{| 
的 结果 , 其 中 a > 0 ЖП ь > 0, 称 做 关于 常数 a 和。 的 “正则 ”指数 收敛 . 在 大 偏差 理 
论 中 相应 的 结果 常用 略 有 不 同 的 、 比 较 “粗糙 ”形式 表示 为 : 

5» 
п 





9541 
nn 





T m > e} <0. (15) 


这 种 表示 形式 自然 出 于 (14) R, 在 于 说 明 “指数 ”收敛 速度 , 但 是 不 强调 常数 ЯП o 
的 值 . 
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现在 考虑 概率 


ee ы лы ыда. 
自 上 侧 估计 的 问题 . ЭХ ЖЕ ЖЫЕН ЖР ж Ж.Ж ЖАР КАНА ЕЯ. 


假设 独立 同 分 布 非 退化 随机 变量 ,6 6,… 满足 克拉 默 条 件 (3). 
固定 n>1, 设 





к=ш{к>л: ДЕ >а}, 


34 Sk/k <a, k > n 时, к= oo 
其 次 , 设 a 和 入 > 0, 满足 


Ла — 1пф(ЛА) 2 0. (16) 


5, 
зно >}) =р[5: ако) 


= р {ел5 > елак, к< о} = Бетине) > e"Da-in g0) к < х} 
<р {osazeno > "а-в к < х) 


<Р 人 peer > ee (17) 


>п 
注意 , 在 证 明 的 最 后 一 步 , 随机 变量 序列 
eASx-kiny(A)， k > 1; 
关于 o- 代数 流 9, = o(&1,… Ek) k > 1, ER. ( 详 见 第 七 章 , 特别 见 81 Я 2.) 
那么 , 由 第 七 章 53 不 等 式 (8), 可 以 导出 


P 人 es е0) > СОСЫН) < ernlya-ine()]， 
kèn 


从 而 , (在 (16) 式 的 条 件 下 ) 得 不 等 式 : 


Р {зр БЕ > a} < A (18) 
#а>т. 由 于 对 函数 f(A) = ^а — ш (Л), 有 /(0) = 0, /'(0) > 0, WEH à > 0 
4% (16) 式 成 立 . 从 而 , 由 (18) 式 可 见 : 如 果 a > т, М 


ка [Xa—In Ф(А)] 
Р {шә > a) <e "8 ено), (19) 
куп k 
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同样 , 如 果 a < m, 则 


一 msup[Xa-lne(》) 
х<о = 


Р {м s < a} <e eni (20) 
由 (19) 和 (20) R, 可 见 
Р {зор 5. с m| > e} <2е- ши{Н(т-е),Н(т+е)} хп. (21) 





#2 由 (11) 和 (19) 式 右 侧 的 相同 , 使 我 们 想到 这 并 非 偶然 . 事实 上 , 其 解释 
EF, 对 于 任何 n < М, 序列 (St/b)ns<ksw ETER ( 见 第 七 章 81 练习 题 5, 和 第 一 
Ж 811 例 4). 

3. 练习 题 

1. 证 明 不 等 式 (8) 和 (20). 

2. 验证 在 集合 (М (5) А) 的 内 部 , 函数 w(A) ЖЕТШ (向 下 凸 ) 函数 ( 若 随机 变 
Ж є 是 非 退 化 的 , 而 且 是 严格 凹 函数 ), 并 且 无 限 可 微 . 

3. 在 随机 变量 & 是 非 退 化 的 假设 条 件 下 , 函数 Н (а) 在 全 直线 上 可 微 , 并 且 是 四 
函数 . 

4. 证 明 如 下 克拉 姆 变换 的 反 演 公式 : 


(А) = suplaX — Н(а)] 


(对 于 一 切 A, 只 有 集合 A = (А: ФО) < оо} 的 有 限 个 点 可 能 除外 ). 
5. 设 Sn = {+ t Em 其 中 如,… ,én,n > 1, 是 独立 同 分 布 的 简单 随机 变量 ， 
В Ее <0,Р{& > 0} > 0. 假设 P(A) = Bexe ,而 infxe(A) = p(0 < p < 1). 
证 明 下 面 的 ( 切 尔 诺 夫 [Чернов]) 定理 : 


lim 1 In P{Sn > 0} = р. (22) 


6. 利用 (22) 式 的 结果 , 证 明 , 对 于 伯 努 利 概 型 (P{&1 = 1} =р,Р{& = 0} =q), 
当 p<z<1 时， 
lim InP{S, > nz} = -H(z), (23) 
其 中 (参照 第 一 章 56 的 记号 ) 


' Dd 
1-р. 





H(z) = 2+0 а) 


1. Ж 5. = а+.--+т > 1, 其 中 &1,62,… 是 独立 同 分 布 随机 变量 , В. 
Е& = 0, Dé = 1. 设 数列 (zn)n>1 ЖА: т„ 一 оо, MH n 一 oo 时 тъ / ут — 0. 
证 明 
Р{5„ > аут} =е 全 (+ 加 )， 
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其 中 当 m 一 oo 时 yn 一 0. 
8. 由 (23) 式 证 明 , 对 于 伯 努 利 概 型 : P{e = 1} =p,P{&1 = 0} = 4, 
(а) 当 p<z<l 且 z=nz-p) 时 ， 
Р{5„ > mp+zn} = exp {-nH (p+ =") (1 +o(1))}; 
(b) 当 rn = anynpa Н. an 一 00, an/ Уп — 0 时 ， 


2 
2пра 


2 
п 





P(S, > np+ zn} =exp{- а+оау}. 


将 (24) 和 (25) 两 式 与 第 一 章 86 中 相应 的 结果 进行 比较 . 


(24) 


(25) 
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51. 强 (狭义 ) 平稳 随机 序列 . 保 测 变换 (34) 


1. 强 平稳 随机 变量 序列 (34) 

2. 保 测 变 换 (34) 

3. 关于 保 测 变换 的 庞 加 莱 定理 (36) 
4. 练习 题 (36) 


52. 遍历 性 与 混合 性 (37) 


1. 保 测 变换 的 遍历 性 (37) 
2. 变换 的 混合 性 及 其 与 遍历 性 的 关系 (39) 
3. 练习 题 (39) 


53. 遍历 性 定理 (40) 


1. 毕 达 哥 拉 斯 一 辛 钦定 理 (40) 

2. 在 平均 收敛 意义 下 的 毕 达 哥 拉 斯 - 辛 钦定 理 (42) 
3. 遍历 性 定理 (43) 

4. 练习 题 (44) 
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在 概率 论 的 框架 之 外 , 可 以 将 强 平稳 随机 序列 理论 , 表述 为 可 测 测度 空间 上 的 
单 参数 保 测 变 换 群 理论 , 它 与 动态 系统 的 一 般 理论 和 遍历 性 理论 临近 . 
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81， 强 (狭义 ) 平稳 随机 序列 . 保 测 变换 


1， 强 平稳 随机 变量 序列 ” 设 (9,9, Р) 是 一 概率 空间 , E= (&1,€2,…) 是 一 随 
机 变量 序列 , 或 简称 随机 序列 . 以 pk 表示 序列 (Ekti бк, 7:5). 

定义 1 ”随机 变量 序列 © 称 做 强 平稳 的 , 如 果 对 于 任意 k > 1, pk 上 和 & 有 相同 
的 概率 分 布 : 


Р{(&,&,.--) Е B} = Р{(&+а,&+,-)Є B}, Be.B(R™). 


由 独立 同 分 布 随机 变量 5 = (&1,6€2,…) 形成 的 序列 , 是 平稳 序列 最 简单 的 
例子 ， 从 这 样 的 序列 出 发 , 可 以 构造 广泛 的 平稳 序列 类 7 = (mn), 其 中 тк = 
(Єк, Ekti быт), 而 g(T1,… ,zn) 是 任意 博 雷 尔 函数 . 

如 果 = (&1,é2,…) 是 独立 同 分 布 随 机 变量 序列 ，El&1| < оо,Е& = т, 则 根据 
强大 数 定律 , 以 概率 1 

а+ + 
п 

伯 克 霍 夫 (G. D. Birkhoff) 在 1931 年 作为 力学 定理 , 得 到 了 这 一 结果 出 色 的 推 
Г. 所 谓 力学 定理 , 涉及 动态 系统 的 “相对 到 达 时 间 ” 的 性 质 , 这 里 的 动态 系统 是 由 
微分 方程 描述 的 , 而 假设 微分 方程 有 积分 变 式 (“守恒 系统 ”). 

辛 钦 于 1932 年 紧 接着 证 明了 , 实际 上 伯 克 霍 夫 定理 可 以 推广 到 更 一 般 情形 :“ 多 
维 空间 在 自身 中 的 运动 , 并 且 保持 集合 的 测度 不 变 ”. 

我 们 将 既 在 “动态 系统 ”理论 的 框架 内 , 又 在 “ 强 平稳 随机 序列 ”的 框架 内 , 同 
ШИ ЇН ЭЛЕ ЖЖП ЗЕ KHAR. 

这 时 基本 着 重点 放 在 该 理论 有 关 “ 饥 历 性 ”的 结果 上 . 

2. 保 测 变换 Я (9,Я.Р) 是 一 (完备 ) 概率 空间 . 

定义 2 ”如 果 对 于 任何 4e 多 , 有 


>m, n= оо. 


ТУА = {о:ТоєА}є.#, 


则 空间 О 到 自身 的 影射 T 称 做 可 测 的 . 
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定义 3 ”如 果 对 于 任何 4e 多 ,有 
Р(Т-!А) = P(A), 


则 可 测 影射 T 称 做 保 测 变换 (morphism). 

设 Т 是 保 测 变换 , т" 是 其 п КЖ, Ша = 600) 是 一 随机 变量 ， 设 є, = 
ET w), n > 2, 考虑 序列 上 = (61,&2,…). 我 们 证 明 此 序列 是 平稳 的 . 

ШЕЙ A = {w : E € В},Ау = {0:066 В}, Ф B € B(R®), W w eA 
当 且 仅 当 Tw € А, В А, = T-14. 由 于 P(T-14) = P(A), В М, Р(А!) = P(A). 同 
样 , 对 于 任意 事件 Ak = {w : kE € B}, k > 2, Ж Р(Ак) = P(A). 

这 样 , 所 引进 的 保 测 变换 , 为 建立 强 平稳 序列 提供 了 可 能 性 . 

在 一 定 意义 上 有 相反 的 结果 : 对 每 一 平稳 序列 Е, 对 所 考虑 概率 空间 (ОЎ, Р), 
存在 新 概率 空间 (ÜF, P), 以 及 随机 变量 和 (5) 和 保 测 变 换 公使 随机 序列 & = 
{& (2), 2.070), ... } 与 随机 序列 & = {&1(w),é2(w),…} 有 相同 的 分 布 . 

事实 上 , 作为 © 取 “坐标 ” 空间 RO, 并 设 F (R>), Б = Pe, 其 中 P(B) = Р{ш: 
єє B},B с BRS). 空间 0 的 变换 Т, 决定 于 关系 式 T(z1,72,…) = (22,73,…). 
ЖР 2 = (z1,72,…), 记 


&(@) = т, &(6) =&(Т"-!2), п>2. 


现在 设 4 = {2 (1, ,zk) € B}, B € BRY), Н Т-1А = {Ù : (2+ лини) € В}. 
那么 , 由 平稳 性 , 可 见 


B(A) = Р{ш:(&,-,&) € В} = Р{ш: (в»,--- p E41) € B} = Р(Т-1А), 
ШШ Т ERNER. 由 于 对 于 任意 k, 
Б{о: (&,... №) € В} = P{w : (E1, ,&) ЕВ}, 


则 由 此 可 见 E 和 有 相同 的 分 布 . 

下 面 是 保 测 变 换 的 例子 . 

例 1 #О={ол,-,ш},п > 2, 是 由 有 限 个 点 构成 的 集合 Я 是 Q 中 一 切 
子 集 的 o- 代数 , Tw; = win1 Si <п-1, Тол = ол. WR P(w) = 1/п, ШТ 
是 保 测 变换 . 

例 2 设 Q=[0,1),F =. 罗 (0,1)),P ЖЛ, Ас (0,1), W Tr = (z+ 入) 
是 保 测 变换 . 

现在 考虑 导致 研究 保 测 变换 的 物理 前 提 条 件 . 

假设 某 一 系统 按照 一 定 运动 规律 (在 离散 时 间 ) 演变 , 并 设想 О 是 该 系统 的 状态 
ш 的 相 空间 . 那么 , WE w 是 系统 在 时 刻 п = 1 的 状态 , 则 T"w 是 经 过 n 步 系 统 进入 
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的 状态 , 其 中 了 是 (该 运动 规律 诱导 的 ) EBAT. 其 次 , 假如 4 是 某 一 “状态 w 的 
集合 ", 则 TA = {w : Tw є А} 根据 其 定义 是 经 一 步 到 达 集合 4 的 一 切 “ 初 始 ” 状 
Ж ш 的 集合 . 因此 , 假如 把 О 视 为 “不 可 压缩 的 液体 ”, R PTA) = Р(А) 可 以 
视 为 完全 自然 的 “体积 ”保持 不 变 的 条 件 . (对 于 经 典 的 封闭 哈密 顿 (W. R. Hamilton) 
系统 , 著名 的 刘 维 尔 (J. Liouville) 定理 断定 , 相应 的 变换 Т 是 保持 勒 贝 格 测度 不 变 
的 变换 .) 

з. 关于 保 测 变换 的 庞 加 莱 定理 FEAF HEHE” 00А Ж (J.H. Poincaré) 
定理 (1912), 是 有 关 保 测 变 换 最 早 的 成 果 之 一 . 

定理 &(ОЎ Р) 是 一 概率 空间 , T 是 保 测 变换 , A < PF. ЖА, 对 于 无 限 多 
个 n>1 和 几乎 一 切 点 we А, Җ Т"шє А. 

证 明 记 C = {we А: То ¢ А, ЖЕ п> 1}， 由 于 对 于 任意 n> 
CNT-"C = в, М Т-"СГ\Т-("+®С = Т-"(СГ\Т-"С) = е. ЖЊ, 序列 
{т-"С} 由 有 相同 P- 测度 的 不 相交 集合 构成 . 因此 ， 


S P(C) = У Р(Г-"С) < PQ) = 1, 
n=l n=1 
从 而 P(C) = 0. 从 而 , 对 于 几乎 一 切 点 we A 和 至 少 对 于 一 个 >1,Т"шє А. 由 
此 可 见 , 对 于 无 限 个 mn > 1 有 Tw = А. 
将 上 面 得 到 的 结果 用 于 变换 Ttw,k > 1. ЖА, 对 于 每 一 个 点 we AN, 其 中 
N 是 0 概率 集合 (HE N 是 对 应 于 不 同 的 相应 集合 的 并 ), 存在 这 样 的 nk, 使 
(Te)"xw Е А. 由 此 显然 可 以 得 到 , 对 于 无 限 多 个 n, 有 T"w є А. 口 
Ж 设 E(w) > 0, 则 在 集合 {w:e(w) > 0} Е 


Ут = оо (Р -а.с.). 
к=0 
实际 上 , B An = {ш:&(ш) > 1/n}, 那么 , 根据 上 面 的 定理 在 集合 An Е, 有 


УТ) = оо (Р-ас), 
大 =0 
如 果 令 当 一 co 时 , 得 所 要 证 明 的 结果 . 

Ж 假如 将 概率 测度 Р 换 成 任意 有 限 测度 (0) < оо), 则 定理 仍然 成 立 . 

4. 练习 题 

1. 设 Т 是 保 测 变换 , 5 = E(u) 是 一 随机 变量 , 并 且 有 数学 期 望 EE(w)， 证 明 
Eé(w) = Eé(Tw). 

2. 证 明 , 例 1 和 例 2 中 变换 Т 是 保 测 变换 

3. 0 = [0,1),# =. 罗 ([0,1)),P 是 具有 连续 分 布 函数 测度 , 证 明 变换 


Tr=M(0<A<1) 和 Tz=z2 
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都 不 是 保 测 变换 . 

4. 设 О 是 一 切实 数 序列 w = (… ошоо) 的 集合 , 多 是 由 可 测 柱 集 
诱导 的 o- 代数 , 其 中 的 可 测 柱 集 为 {ш : (wk wetn) Є Bn}(n = 1,2,… ;k= 
0,<1,+2,..-), 而 В, € B(R”). U P 表示 (0,9) 上 的 概率 测度 , 而 双 侧 变换 T 决 
定 于 公式 : 

Т(--- 5-м, W) ag (e 60,1, 422, ). 
ЗЕЯ, Т 是 保 测 变换 , 当 且 仅 当 对 于 一 切 n = 1,2,… ,k = 0,1,42,- 和 Bn € 
BR”) 
P{w : (wo ,wn-1) Є Въ) = P{w : (wk, Wktn-1l) Є Ва}. 

5. 设 cogn e 是 一 平稳 随机 元 序列 ，6n(n > 0) 的 值 属于 博 雷 尔 空 间 5S ( 见 第 
二 章 $7 定义 9). 证 明 , 可 以 构造 (有 可 能 在 原 概率 空间 的 扩展 空间 上 ) 在 5 中 取 值 
的 随机 元 素 £_1,€_2,… , 使 双 侧 序列 … ,上 -to 上 是 平稳 的 . 

6. ТЯ 是 (ОЎ Р) КТБ, © 是 由 F8) = F) 诱导 的 9 子 
集 的 r- Ж. 证 明 , 如 果 对 于 A e ER PTA) = Р(А) 成 立 , 则 此 等 式 对 于 
Ає (= т(#)) 也 成 立 . 

7. ВТ (0,9,Р) 上 的 可 测 变换 , У 是 多 HF o- 代数 .证 明 对 每 个 
АЕЯ, A 


Р(А|9)(Ти) = P(T AIT’ S )(w) (Р-а.с.). (1) 
特别 , 设 О = Re 是 数列 w = (wowi) 的 空间 , 而 & (и) = wx №; 7 是 推移 变换 : 
Tooot…) = (ww), 换 句 话说 , Ж Elw) = шк, М (Го) = шк. WA, 等 
式 (0) 有 如 下 形式 


P(Alén)(Tw) = Р(Т-'А|,+1)(0) (Р-а.с.). 


8. 设 工 是 在 (О, 7) 上 的 可 测 变 换 ， P 是 所 有 概率 测度 Р 的 集合 , 而 关于 概率 
测度 Р, 变换 T 是 保持 测度 Р 不 变 的 变换 . 证 明 : 

(а) 集合 多 是 凸 的 ; 

(b) 变换 Т 关于 概率 测度 Р 是 遍历 变换 , 当 且 仅 当 Р 是 集合 P 的 边界 点 (E 
不 能 表示 为 如 下 形式 的 点 : Р = МР, + АР, А! > 0,5%» > 0, +22 = 1 Pi # 
P2, P1, P2 € P). 


52. 遍历 性 与 混合 性 


1. 保 测 变换 的 遍历 性 ”在 整个 这 一 节 中 , 我 们 都 将 以 了 表示 作用 于 概率 空间 
(QF, P) 上 的 保 测 变换 . 

定义 1 集合 4e 8 称 做 不 变 的 , 如 果 T-14 = 4. 集合 4e Ў 称 做 几乎 不 
变 的 , 如 果 4 和 TA = А 只 相差 一 0 测 集 , 即 P(4AT- :4) = 0. 
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不 难 验 证 , 不 变 (几乎 不 变 ) 集合 类 F (相应 地 A) 构成 o КЖ. 

定义 2 ” 保 测 变换 T 称 做 遍历 的 (或 度量 可 递 变 换 ), 如 果 每 一 个 不 变 集合 A 
的 测度 只 能 为 0 或 1. 

定义 3 ”随机 变量 7 = nlo) 称 做 不 变 的 (或 几乎 不 变 的 ), 如 果 对 于 一 切 wen 
(对 于 几乎 一 切 w є О)л(ш) = (То). 

下 面 的 引 理 建立 不 变 集合 与 几乎 不 变 集合 之 间 的 联系 . 

引 理 1 如 果 4 是 几乎 不 变 集合 , 则 存在 一 几乎 不 变 集合 В, 使 P(4AB) = 0. 

证 明 9 В = Т-А, W Т-:В = Т-А = В, H ВЕ. 不 难 验证 





ААВС (}(т-*ААт-®+®А). 
к=0 
由 于 Р(Т-®*АЛТ-®+)А) = P(AAT-'A) = 0, Я М P(AAB) = 0. о 

3182 ”变换 了 是 遍历 的 ， 当 且 仅 当 每 一 个 几乎 不 变 集合 4 的 测度 只 能 为 0 
Äl 

证 明 设 4e.y", 则 根据 引 理 1, 存在 一 几乎 不 变 集合 B, 使 P(4AB)=0. 但 
Ж, 由 于 变换 Т 是 遍历 的 , 故 P(B) = 0 或 1. 由 于 .C.F", 故 逆 命 题 显然 成 立 . О 

定理 1 设 T 是 保 测 变 换 . 下 列 各 个 条 件 等 价 : 

(1) T 是 遍历 的 ; 

(2) 每 一 个 几乎 不 变 随 机 变量 以 概率 卫 为 1 是 常数 ; 

(3) 每 一 个 不 变 随 机 变量 以 概率 卫 为 1 是 常数 . 

证 明 (1)5(2). 设 了 是 遍历 的 , 而 上 5 是 几乎 不 变 的 , 即 以 概率 1 有 Ew) = (То). 
ЖА, 对 于 任何 сєк, 集合 A = {ш:&(ш) < cj e 5”, 而 根据 引 理 2, P(A.) = 0 
或 1. 设 C=supfc:P(4o)=0}. 当 cloo 时 4o10, 而 当 cl-oo 时 4c412, 故 
C < о. £ 

那么 ， 

высы «онр ( 


U {ве <с- 1) -0 


п=1 


类 似 可 得 , Р{ш:&(ш) > С} = 0. FE, Р{ш:&(ш) = С} =1. 


(2)(3). EA. 
(3)= (4). Ж АЕ’, Д) ТА 是 不 变 随机 变量 , 因此 以 概率 1 有 Ta =0 或 I4 = 1, 
故 P(4) =0 或 1. о 


Ж 如 果 在 定理 中 的 随机 变量 有 界 , 则 定理 的 结论 仍然 成 立 . 

为 演示 该 定理 的 应 用 , 我 们 看 下 面 的 例子 . 

Я #о=,1), F = .#([0,1)),Р 是 勒 贝 格 测度 , 而 Tw = (w+1l)mod 1. 证 
明 工 是 遍历 变换 , 当 且 仅 当 和 是 无 理 数 . 


$2. 遍历 性 与 混合 性 739 





B E = E(w) 是 不 变 随机 变量 , E62(w) < оо. 熟知 , 具有 的 EE (w) < оо 函数 E(w) 
的 傅 里 时 级 数 D се? 均 方 收敛 , А len? < ос. 由 于 了 是 保 测 变换 (81 例 
2), 则 由 于 所 假设 的 随机 变量 є = elo) 的 不 变性 (81 练习 题 1). 可 见 


Cn = EE(w)er2rinw = ЕЕ(Тое-2" Те ~ er-2rinAEE(Tw)e-2rinw 


一 er-2rinAEE(wje-2rinw = cne-2rinA., 


因此 cn(1 - e-?2rim^) = 0. 根据 条 件 А 是 无 理 数 , 即 对 于 一 切 n l, erim g F 
Ж, cn = 0,n # 1,&(ш) = co(P — а.с.), 而 根据 定理 1, T 是 遍历 变换 . 
另 一 方面 , 假如 和 是 有 理 数 , 即 = k/m, 其 中 上 т 是 整数 . 考虑 集合 


2т-2 


大 大 十 1 
4= U {өз so< ER. 


k=0 





显然 , 集合 4 不 变 的 , 然而 P(A) = 1/2. 从 而 , Т 不 是 遍历 的 . 
2. 变换 的 混合 性 及 其 与 遍历 性 的 关系 
定义 4 称 保 测 变换 Т 为 混合 (具有 混合 性 的 ), 如 果 对 于 任意 ABES, A 


„lim P(4mT-"B) = Р(А)Р(В). (1) 


下 面 的 定理 指出 了 变换 的 混合 性 与 遍历 性 的 关系 . 
定理 2 ”具有 混合 性 的 任何 变换 了 都 是 遍历 的 . 
A Я леЯ, Ве, В=Т"В,п> 1, 即 对 于 一 切 m>1 有 


P(ANT-"B) = Р(АПВ). 


因此 由 于 (1) <, 4 A = В В P(B) = Р?(В), FÆ, P(B) =0 1. п 
3. 练习 题 
1. 证 明 随 机 变量 © = 6(w) 是 不 变 的 , 当 且 仅 当 它 .一 可 测 . 
2. EHRE 4 是 几乎 不 变 的 , 当 且 仅 当 Р(Т-!А\А) = 0. 
3. 证 明 变换 T 具有 混合 性 , 当 且 仅 当 对 于 任何 两 个 随机 变量 5 和 : Е < 
œ, En? < оо, Мп > oo 时 ,有 


ЕС(Т^!ш)п(ш) 一 Е&(ш)Ёл(ш). 


4. 举例 说 明 , 保 测 遍历 变换 未 必 具 有 混合 性 质 . 
5. 设 工 是 空间 (О, F, P) 上 的 可 测 变换 , .名 是 о 的 子 集 的 o- 代数 , 而 c(-G) = 
Я. 假如 定义 4 仅 要 求 性 质 


„lim Р(АГҮГ-"В) = P(A)P(B) 
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对 于 А,В e A 成立 . 证 明 此 性 质 对 于 一 切 А,В EF = о(6) 成 立 . (从 而 变换 Т 
ERA). 

证 明 如 果 .名 是 r- ЖН n(A) = Я, 则 上 述 结论 仍然 成 立 . 

6. Ж 4 是 几乎 不 变 集合 . 证 明 , 当 且 仅 当 对 于 一 切 m = 1,2,… ,T"w E€ А, ИЖ 
ЖІ 有 we А. (对 照 81 的 定理 .) 

т. 举 一 空 间 (9,Я,Р) 上 的 保 测 变换 T 的 例 , 使 得 : 

(а) 由 Ae 多 绝对 得 不 出 T4 e Я; 

(b) HAES Я ТАеЕ Я 绝对 得 不 出 P(4)=P(TA4). 


83. 遍历 性 定理 


1. 毕 达 哥 拉 斯 — 辛 钦定 理 
定理 1 ( 毕 达 哥 拉 斯 [Pythagoras] - Ж) ЖТЖ, ж © = 5(w) 是 
随机 变量 , ЕЕ < о. ЖА, 


п-1 
па 1 У (Т) BES) (Ра). i 
k=0 
而 且 , ЖТ 是 遍历 的 , 则 
‚ 1 
aT) Be ae 四 


该 定理 的 证 明 本 质 上 基于 下 面 的 引 理 , 其 简单 的 证 明 是 加 尔 西亚 (A. М. Garsia, 
1965 年 ) 得 到 的 . 

引 理 (最 大 遍历 性 定理 ) ” 设 了 保 测 变换 , 而 上 = Elw) 是 随机 变量 , EE| < оо, 
且 


Sk(w) = Elw) + &(Тш) +- + ETE w), 
Му (ш) = max{0, 51 (w), +- ,Sk(w)}. 


ЖА, AHERN >L 有 р 
ВЕ) Им, >04) > 0. 


证 明 ШЖ п> k, Я М, (То) > Sk (То), 从 而 
Elw) + Mn (То) > E(w) + Sk(Tw) = 5к+1(ш). 
因为 显然 Elv) > 51 (6) 一 Mn(Tw), 所 以 


Elw) > тах{ 51 (6%), --- › 5» ()} — М» (То). 
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注意 到 , 由 于 {Mn(w) > 0} = {max[S1(w),… ,Sn(w)] > 0}, 可 见 


Е (4) м,.>0} (&)] > Е[тах{51(ш),--- , Sn(w)} — М. (Тә) Дм, >0} (@)] 
> Е[Ми(ш) — Mn(Tw) цм, >03 (@)] 
> E[Mn(w) — Mn(Tw)] = 0, 


其 中 用 到 , ШЖ Т 是 保 测 变换 , 则 ЕМ, (6) = ЕМ, (То) (81 的 练习 题 1). п 
证 明定 理 1 ВЕ”) = 0 (EWA E- EES) 替换 £). 设 
Fi лш" ` 
ПРЕ 


m: 
为 证 明 (1) R, 只 需 证 明 以 概率 1, 由 
0<п<т<0. 


考虑 随机 变量 亏 = т(ш). НТ п = (То), 可 见 志 是 不 变 的 . 从 而 , 对 于 每 一 个 。 > 0, 
RE А. = {5(w) > =} 是 不 变 的 . 现在 引进 新 的 随机 变量 : 


E(w) = E(w) — e)la. (ш), 
并 设 
54 (4) = E* (w) +E (Tw) +... + (ТК), 
М (w) = max{0, S? (w), ‚5% (ш)}. 
么 , 根据 引 理 , 对 于 任意 n>1, 有 
ЕЦ м;>0} > 0. 
而 当 m 一 ce 时 
а Е 
= fap $i > o} = {шр > e} ПА: = Ae, 
其 中 由 于 вир Sk/ 上 > Ӯ, ТА А. = {w :1] > =}, 可 见 最 后 一 等 式 成 立 . 
此 外 ， ЕТ < Е| | +e. 因此 , 根据 控制 收敛 定理 , 有 
0 < ЕС Ts>o] > El" IA.) 
于 是 ， 


0 < Е" 1л.] = El(é – e)14.] = Е[&ТА,] —єР(А„) 
= E[E(éF)14.] — eP(4:) = —єР(А.), 
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因此 P(A.) = 0, ММ, Ж Р{]<0}=1. 
类 似 地 , 用 -5(w) 代替 Elo), 有 


而 P{-n<0}=1, 即 P{n>0}=1. 因而 , 以 概率 1 有 0< < 0. 于 是 , 证 明 
了 定理 的 第 一 个 结论 . 

为 证 明了 定理 的 第 二 个 结论 ， фыск 由 于 EES) 是 不 变 随机 变量 ， ч 
Ж Т 是 遍历 的 , 则 以 概率 1 有 EES) = 

Я 保 测 变换 是 遍历 的 ， СРР ЕНЕ А,ВєЎ,Җ 


п-1 
lim І У`Р(АГҮГ*В) = Р(А)Р(В). (з) 
k=0 


为 证 明 Т 的 遍历 性 , 在 (3) RPH A=B e7, W ANT-*B = B, H P(B) = 
P?(B), 因此 P(B) = 0 或 1. 相反, 设 Т 是 遍历 的 , 则 对 于 随机 变量 © = (w), 由 
(2) 式 可 见 以 概率 1 有 


1" 1 
lim- У в(ш) = Р(В). 


于 该 式 两 侧 在 集合 上 同时 求 积分 , 并 利用 控制 收敛 定理 , 得 所 要 证 明 的 关系 式 (3). 
2. 在 平均 收敛 意义 下 的 毕 达 哥 拉 斯 — 辛 钦定 理 现在 证 明 , 在 定理 1 的 条 件 
中 的 (1) RA (2) R, 不 仅 以 概率 1 收敛 , 而 且 平均 收敛 也 成 立 . (下 面 定理 3 的 证 明 
将 要 用 到 这 一 结果 .) 
定理 2 设 T 保 测 变换 , 而 上 = Elw) 是 随机 变量 , ЕЕ < оо. ЖА, 


n-i 
s|; у &(т%)- 4 0, яо. w 
k=0 
而 且 , #T 是 遍历 的 , 则 


n=l 
к D (Ttw) - ze) ж б 6) 
k=0 





证 明 对 于 任意 = > 0, 存在 一 有 界 随 机 变量 (lm(w)| < М), 1 EJE- n| <=. Ж 


么 ， 


w) = n(T*w)] 


15 (Тка) — 














w) — Е(1.77)]| + Е Е(&|7”) – Е( >”). (6) 








33. 遍历 性 定理 - 43. 





由 于 | < М, 则 由 控制 收敛 定理 和 (1) 式 可 见 , #4 п 一 oo 时 , (6) 式 中 不 等 号 的 右 
侧 第 二 项 趋向 о. 至 于 第 一 项 和 第 三 项 中 , 每 一 项 都 小 于 或 等 于 =. 因 此, 对 于 充分 
大 的 п, (6) 式 小 于 22, 从 而 (4) 式 得 证 . 最 后 , 如 果 若 т 是 遍历 的 , 则 由 (4) 式 , 以 
及 定理 1 之 证 明 末 尾 的 说 明 : E т 是 遍历 的 , 则 以 概率 1 有 EES) = ЕС”, 立即 
得 (5) 式 . o 

3. 遍历 性 定理 ”现在 考虑 遍历 性 对 于 强 平 稳 随 机 序列 正确 性 的 问题 . 设 上 = 
(&1,&2,…) 是 定义 在 概率 空间 (0,97, P) 上 的 强 平稳 随机 序列 . 一 般 , 在 (ОЎ ,P) 
上 有 可 能 并 不 存在 保 测 变换 , 故 不 能 直接 运用 定理 1. 不 过 , 在 $1 中 已 经 指出 , 可 以 
考虑 建立 这 样 的 (坐标 ) 概率 空间 (0,37, Б). БИЛЛЕ Е = (E, in) 和 保 测 变 换 
Т, 其 中 E(D) = 207-10), 使 得 5 和 按 分 布 相等 . 由 于 这 一 性 质 , 像 几乎 必然 收 
敛 与 平均 收敛 一 样 , 只 与 概率 分 布 有 关 , 则 对 于 某 个 随机 变量 л, 由 以 概率 1 收敛 与 
平均 收敛 意义 下 














12 са ра 
п 560% 10) = , 
可 得 n Ё (о) 也 以 概率 1 收敛 与 平均 收敛 意义 下 收敛 于 某 随机 变量 п: р S i. 
24 ка т я 
由 定理 1 可 见 , 如 果 БЕ, < оо, U 7 = EES), 其 中 77 ETERA (Е 是 
对 测度 PR FH). 现在 描绘 随机 变量 7 的 结构 . 
定义 1 称 集合 4 e 多 相对 于 序列 EAREN, 如 果 存 在 集合 В EBR), 
使 对 于 任何 n>1, 有 
A = {w : (6.6417) В}. 
这 样 不 变 集合 的 全 体 构成 o- 代数 , 记 作 S e. 
定义 2 平稳 序列 & 称 为 遍历 的 , 如 果 任意 不 变 集合 的 测度 只 有 0 或 1 两 个 可 
能 值 . 
现在 证 明 , 当 n — оо 时 , 随机 变量 п 在 以 概率 1 收敛 与 平均 收敛 意义 下 , 是 随 
机 变量 n-! вы) 的 极限 , 且 可 以 取 作 ЕУ). 为 此 首先 注意 到 , 自然 可 以 设 
=1 


по) = Tm у ео). @ 
k=l 


由 上 极限 jim 的 定义 可 见 , 对 于 这 样 定义 的 随机 变量 nw), 集合 {w : nw) < уу є 
R) 是 不 变 的 , 从 而 n 为 一 ЯМ. 其 次 , 设 де... ЖА, 由 于 


Bli Sen 
[22 i 
可 见 对 于 由 (т) 式 定义 的 有 

за 

nÈ f eP = firr. (8) 





—0, n= оо, 
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设 B e . 罗 (Re) 满足 条 件 : 对 于 任意 上 > 1 有 4 = {w : (Elk) Е В}. ЖА, 
НЗ & 的 平稳 性 , 可 见 


[вар = ] вар = f бар = | вар. 
А {мб kr+1, ЕВ} {w:(€1,€2,… JEB} А 


因此 , 由 (8) 式 可 见 , 对 于 任意 А e с, 有 如 下 等 式 


J aap = | тр. 


该 式 表明 ( 见 第 二 章 87 的 (1) Ж), (Zex 可 测 ) 随机 变量 ) = EES 6), 并 且 如 果 
序列 上 是 遍历 的 , Ш EELA) = E£. 

于 是 , 证 明了 下 面 的 定理 . 

定理 3 (遍历 性 定理 ) itE= (Eén) 是 强 平稳 序列 , БЕ < оо. ЖА, (Ж 
以 概率 1 收 全 与 平均 收敛 意义 下 ) 





imi D eelo) = ЕО. 
k=1 
ЖА, 如 果 同时 & 又 是 遍历 序列 , 则 (在 以 概率 1 收 全 与 平均 收敛 意 义 下 ) 
lim 2 У 6,00) = Её. 
Ы і 


4. 练习 题 

1. Я E= (&1,€2,… ) 是 高 斯 平稳 序列 , Бє, = 0, 而 相关 函数 为 R(n) = EEk+nEk. 
证 明 , Rin) 一 0 的 充分 条 件 是 , 对 应 于 随机 变量 序列 с 的 保 测 变换 为 混合 (因而 是 
遍历 的 ). 

2. 对 于 任何 独立 同 分 布 随机 变量 序列 E = (61,62, ---), 相应 的 保 测 变 换 都 是 混 
合 . 

3. 证 明 平稳 序列 为 遍历 的 , 当 且 仅 当 对 于 任意 В EBR), k =1,2,..., ИЖ 
Ж 1, 


FD Iele обаа) > PAE séu) € В}. 
і=1 


4. ВРЯРЯ (0,7) 上 的 两 个 概率 测度 , HAF P 和 P 的 保 测 变换 T 是 
遍历 的 . 证 明 , ЖЕНА Р=Р,Ж ДР1Р. 
5. Ж Т Ж (О,#,Р) 上 的 保 测 变换 , 而 .名 是 9 的 子 集 的 代数 , Н c(-G) = 多; 
设 1 п-1 
IP = – DIa(T*w). 
% k=0 


证 明 变换 Т 是 遍历 的 , 当 且 仅 当 满足 下 列 条 件 之 一 : 


5з. 遍历 性 定理 -45- 





(а) 对 于 任意 A e 4,1) -5 P(A); 
(b) 对 于 一 切 4,B € £, 


п-1 ч 
lim 1 У Р(АПТ-*В) = Р(А)Р(В); 
k=0 


(с) 对 于 任意 Ає 多 ,IC Р. P(A). 

6. ТЯ (ОЎ Р) 上 的 保 测 变换 . 证 明 变换 Т (关于 测度 卫 ) 是 遍历 的 , 当 且 
仅 当 在 (9,9) 上 不 存在 概率 测度 P + P,P <P, ШЕТ ЖТР 是 保 测 变换 . 

т. ( 伯 努 利 推移 变换 ) 假设 S 是 一 有 限 集合 (例如 , 5 = {1,2,… , N}), 而 Q= 8% 
是 序列 w = (wo,w1,…) 的 全 体 , 其 中 w є 5. В & (6) = шк, 并 且 定义 推移 变换 : 
Т(шоуш, е) = (wwa: ), 即 对 于 60,61,…, WR Elw) = шк, M &(Тш) = әр. 
假设 在 集合 5 = {1,2,...,№} 的 元 素 i 上 给 定 正 数 pi, Н.р +р2 +... +рм =1( 即 
数组 (p1,p2,… ,pw) 是 概率 分 布 ). 利用 这 一 变换 可 以 在 (5%,.#(5%)) 上 定义 测度 
Р ( 见 第 二 章 83) 


Р{ш: (wi, ,wk) = (ит, ош) = Ри pu: 


换 名 话说 , 按 60(w),&1(w),… 独立 的 原则 引进 概率 . 关于 这 样 建立 的 测度 Р, 推移 变 
HT 习惯 上 称 做 伯 努 利 推移 或 伯 努 利 变换 . 

证 明 伯 努 利 变换 具有 混合 性 质 . 

8. ТЯ (ОЎ ,Р) 上 的 保 测 变换 . 引进 记号 TF = (Т-А: АеЯ}, № 
H o- 代数 


F n= [TF 
п=1 


是 平凡 的 (P- 平凡 的 ), 如 果 中 的 每 一 个 集合 的 测度 为 0 或 1 (这 样 的 变换 称 做 柯 尔 
ЖУКА). ЧЕН КАЗНЕ, 并 且 具 有 混合 性 . 

9. 设 1<p < oT 是 概率 空间 (QF, Р) 上 的 保 测 变换 , 而 随机 变量 Ew) e 
LP, ,Р). 

证 明 空 间 [Р(9,Я,Р) 上 的 如 下 (38 * 8 [J. von Neuman]) 遍历 性 定理 : 

п-1 Р 

Е 1 Уу `&(Т*%ш)—т(ш)| —0, п оо. 
к=0 


10. 根据 博 雷 尔 定理 (第 四 章 83 例 2): 区 间 [0,1) ЕЖ w 的 二 进 制 分 解 中 “!1 的 
比率 ” 和 “0 的 比率 ”( 关 于 勒 贝 格 测度 ) 几乎 必然 收敛 于 1/2. 如 果 将 这 一 结果 视 为 
由 公式 





T(w) = 2w(mod 1) 
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定义 的 区 间 [0,1) 到 自身 的 变换 Т: [0,1) — [0,1), 试 利用 遍历 性 定理 1, 证 明 上 述 博 
EREM. 
11. 同上 题 一 样 , 设 о є [0,1). 考虑 由 公式 


0, 若 w=0， 
мо (3. 车 w#0 


定义 的 变换 了 : [0,1) 一 [0,1), 其 中 {1} 表示 数 т 的 分 数 部 分 . 
设 已 = P(.) 是 区 间 [0,1) 上 的 高 斯 测度 , 由 如 下 公式 定义 : 


р(А) = 2. [ „92 


5 1+? A є #([0,1)). 


证 明 变 换 т 保持 高 斯 测度 不 变 . 
12. 举例 说 明 , 对 于 具有 无 限 测度 的 可 测 空间 , 庞 加 莱 “ 常 返 定理 ”(§1 第 3 小 
节 ) 一 般 不 成 立 . 


第 六 章 弱 (广义 ) 平稳 随机 序列 . L 理 
论 





51. 协 方差 函数 的 谱 表示 (49) 


1. 平稳 过 程 的 概念 与 协 方差 函数 (49) 
2. 平稳 序列 的 例 (51) 

З. 赫 尔 格 洛 茨 定理 (55) 

4. 练习 题 (57) 


$2. 正 交 随 机 测度 和 随机 积分 (57) 


1. 扩充 积分 概念 的 必要 性 (57) 
2. 随机 测度 (58) 

3. 随机 积分 (59) 

4. 随机 测度 的 延 拓 (60) 

5. 正 交 增 量 随机 过 程 (61) 

6. 练习 题 (62) 


53. 98 (广义 ) 平稳 序列 的 谱 表 示 (62) 


1. 平稳 随机 序列 谱 表 示 (62) 

2. 由 平稳 序列 经 线性 变换 得 到 的 随机 变量 的 构造 (66) 
3. 线性 滤波 器 (67) 

4. 遍历 性 定理 (70) 
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5. 练习 题 (72) 


$4. 协 方差 函数 和 谱 密 度 的 统计 估计 (72) 


1. 协 方差 函数 的 估计 及 其 性 质 (72) 
2. 谱 函 数 和 谱 密 度 的 估计 的 求法 (75) 
3. 谱 函 数 的 估计 (77) 

4. 练习 题 (78) 


$5. 沃 尔 德 分 解 (78) 


1. 平稳 序列 的 正则 分 量 和 奇异 分 量 (78) 
2. 沃 尔 德 分 解 (80) 

3. 外 推 和 预测 (82) 

4. 正则 序列 的 充分 和 必要 条 件 (83) 

5. 练习 题 (84) 


$6. 外 推 、 内 插 和 过 滤 (85) 


1. 外 推 (85) 
2. 内 插 (90) 
3. 过 滤 (92) 
4. 练习 题 (94) 


$7. 卡尔 曼 - 布 西 滤波 器 及 其 推广 (95) 


1. FRR - 布 西 概 型 , 卡尔 曼 — 布 西 滤波 器 (95) 
2. 最 优 线性 滤波 器 的 结构 (99) 

3. 例 (101) 

4. 练习 题 (103) 


s. 协 方差 函数 的 谱 表示 49. 





谱 表示 在 弱 平 稳 随 机 过 程 理 论 的 中 心 位 置 ,是 研究 弱 平 稳 随 机 过 程 的 基础 в 
何平 稳 过 程 可 看 成 , 具有 随机 振幅 和 相位 的 、 各 种 频率 的 互 不 相关 的 调和 振动 的 登 
Жо. 
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81， 协 方差 函数 的 谱 表示 


1. 平稳 过 程 的 概念 与 协 方差 函数 ”根据 上 一 章 给 出 的 定义 , 随机 序列 上 = (&\, 
&,...) 称 做 强 平稳 序列 9, 如 果 对 于 任意 集合 В EBRO) 与 任何 п> 1， 


Р{(1, £2 ++) є В} =P{(ént1, во, ) ЕВ}. (1) 
特别 , 由 此 可 见 , 车 EE? < со, Д) Pen 不 依赖 于 n: 
Een = Ес, (2) 
而 且 协 方差 соу( Еп ът, En) = Е( път — Efn+m)(En 一 Е&һ) 只 依赖 于 m: 
cov(éntm, En) = cov(E14m, £1). (3) 


这 一 章 将 研究 (RAAR MER) 所 谓 弱 (广义 ) 平稳 随机 序列 , 这 里 将 条 件 
(1) 换 为 条 件 (2) 和 (3). 

假设 所 考虑 的 随机 变量 ev, 对 于 ne = {0, 土 1,…} 有 定义 , 而 且 取 复数 为 值 . 
这 一 假设 非但 不 使 理论 复杂 化 , 反而 使 之 更 加 雅致 . 这 时 , 实 值 随机 变量 的 有 关 结 果 ， 
自然 容易 由 复 值 随机 变量 的 相应 结果 , 作为 其 特殊 情形 得 到 . 

Я H? = Н?(0,9.,Р) 是 ( 复 值 ) 随机 变量 的 值 空间 :上 = a + ip, a,b Є Е, 
ВЕ? < оо, 其 中 |&|2 =a? + B2. 如 果 ЕЕ Н?, 则 设 


(6,1) = ЕТ, (4) 
其 中 = a 一 iB Жоп = о +13 ЗЕ. 记 


| = (6,5). (5) 


@ 强 平稳 序列 (过程 ), 亦 称 严格 意义 下 的 平稳 序列 (过 程 ), 或 严 平稳 序列 (过 程 )， 弱 平稳 序列 
(过 程 ), 亦 称 广泛 意义 下 的 平稳 序列 (过 程 ), 或 宽 平稳 序列 (过 程 ). — 译 者 





>50. 第 六 章 弱 (广义 ) 平稳 随机 序列 . L? 理论 





确切 一 点 说 , Н? 是 等 价 随机 变量 类 的 空间 ( 见 第 二 章 510 和 811). 像 实 值 随机 
变量 一 样 , 引进 了 内 积 (En) AMER |е] 的 空间 Н? 是 完备 的 . 按 泛 函 分 析 的 术语 ， 
空间 Н? 称 做 所 考虑 概率 空间 (0,Я,Р) 上 的 随机 变量 的 丁 (或 复 ) 希 尔 伯 特 (D. 
Hilbert) 空间 . 

如 果 сте Н?, 则 称 


cov(£, n) = Е(& – E£)(n — En) (6) 
A ERI n 的 协 方差. 
由 (4) 和 (6) RTI, 如 果 Её = En = 0, 则 
cov(¢,n) = (&,1). (7) 


定义 复 值 随机 变量 序列 & = (En)nez ЕІ? < on Е Z, 称 做 弱 广义 平稳 的 ， 
如 果 对 于 所 有 nez, 有 


Eén = Eéo, 
Cov(én+k,én) = cov(én, 0), КЕ Z. (8) 
为 叙述 简便 , 以 后 总 是 假设 Е& = 0. 这 一 假设 并 不 影响 一 般 性 , 然而 (由 于 (7) 


式 ) 却 可 以 使 协 方差 与 数 积 有 相同 的 形式 , 因此 使 希 尔 伯 特 空间 理论 的 方法 和 结果 
用 起 来 更 加 简单 . 


记 
R(n) = cov(én,é0), n €Z, (9) 
和 (在 假设 R(0) = Eléol? #0 的 条 件 下 ) 
p(n) = то. пЕ 2. (10) 


我 们 把 函数 Rin) 称 做 ( 弱 平 稳 序 列 的 ) 协 方差 函数 , 而 p(n) 称 做 相关 函数 . 
直接 由 定义 (9) 可 见 , 协 方差 函数 Rin) 是 非 负 定 函数 , 即 对 于 任意 复数 a1,… ， 
am, SIEM ti,- ,tm EZ,m>1, 有 


УЗ aiā;R(ti — tj) > 0. a1) 
ij=1 
同样 , 由 此 (或 由 (9) R) 不 难得 到 (练习 题 1) 如 下 协 方差 函数 的 性 质 : 


R(0) > 0， R(-m = Е(п), |R(n)| < R(0), 


a2) 
[А(п) — R(m)|? < 2R(0)[R(0) — ReR(n — т). 





п. 协 方差 函数 的 谱 表 示 -51> 





2. 平稳 序列 的 例 下 面 是 一 些 平稳 序列 上 = (Ennez 的 例 . (为 简便 计 , 下 面 常 
省 略 弱 平 稳 过 程 的 “ 弱 ” 字 , 以 及 n e Z). 

例 1 #&=&д(т), Ж Е& = 0,819 = 1, M о = (п) 是 某 一 函数 . 随机 
变量 序列 © = (En) 是 平稳 的 , 当 且 仅 当 函 数 g(k + п)о (к) 仅 依赖 于 mn。 由 此 不 难看 
到 , FERRER à, 使 





g(n) = #(0)е-®\". 
因此 , 随机 变量 序列 
En = &(0)е?” 
是 平稳 的 , 且 其 协 方差 函数 为 


R(n) = |(0)|?е®. 


特别 , “在 时 间 上 随机 的 常数 ” 6 = & 形成 平稳 序列 . 

Ж 我 们 关于 例 1 指出 , 由 于 ein = с" 0+2, к = +1,42,..., Д) ( 圆 ) 频率 和 
的 值 仅 精确 到 任意 被 加 项 的 2r 倍 . 按照 习惯 , 以 后 总 假定 A € [--т, т). 

例 2 死 周 期 性 序列 设 


N 
& = Уе", nez, (13) 
k=1 
其 中 а, ,zw 是 正 交 随机 变量 : Ezz = 0,i 关 j, 而 且 均值 Ez = 0; Elz]? = оў > 


0, =r S Ak <T, k =1, , М; № #09 j). 
因此 , 随机 变量 序列 ¢ = (En) 是 平稳 的 , 且 其 协 方差 函数 为 


N 
Rin) = > ове". (14) 
k=1 
为 推广 (13) 式 , 现在 设 
& = У zpen, (15) 
大 = 一 oo 


Ж а.к є Z, 具有 与 (13) 式 中 同样 的 性 质 . 如 果 假 设 È оў < оо, 则 (15) 式 右 
侧 的 级 数 均 方 收敛, ЗЕ Н. 


R(n) = у ое”, (16) 
大 = 一 cc 
引进 函数 
FO)= У) о (17) 


{ль <А} 
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ЖА, 协 方差 函数 (16) 可 以 写成 勒 贝 格 - 斯 蒂 尔 切 斯 积分 的 形式 


ви) = f е^"аЕ(л) (- J. arw): (18) 


平稳 序列 (15) 是 由 “ 谐 波 ” ein 之 和 构成 , 其 “频率 ” 为 Xk, 而 其 随机 “振幅 ”zx 的 
“强度 ”为 о? = Ezr? 这 样 , 函数 值 FOA) 关于 序列 е 的 “ 谱 ” 的 结构 , 即 关 于 构成 
表现 (15) 式 之 各 种 不 同 频率 的 强度 值 , 提供 全 面 的 信息 . 根据 (18) R, 函数 F(A) 的 
值 亦 完全 决定 协 方差 函数 R(n) 的 构造 . 

精确 到 常数 因子 , ( 非 退 化 ) 函数 РОА) 显然 是 分 布 函数 , 并 且 在 该 例 中 函数 FA) 
是 阶梯 函数 . 特别 值得 注意 的 是 , 任意 弱 平 稳 序 列 的 协 方差 函数 可 以 表示 为 (18) R 
( 见 第 3 小 节 的 定理 ), 其 中 F(A) (精确 到 规范 因子 ) 是 分 布 函数 , 其 承载 子 , 集中 在 
区 间 [-r,r) Е, Bp 


0, 车 入 <n. 
由 (15) 和 (16) 两 式 形成 的 、 协 方差 函数 R(n) 的 积分 表示 结果 , 使 我 们 产生 一 
种 想法 : 任意 平稳 序列 都 可 以 用 “积分 ”表示 . 实际 上 也 正 是 这 样 , 在 83 利用 按 正 交 
测度 的 随机 积分 将 要 证 明 这 一 点 . 
例 3 HRE = = (en) 是 正 交规 范 随机 变量 序列 , Be, = 0, Еее; = буу, 其 
中 55 是 克 罗 内 克 符 号 . 显然 = = (en) 是 平稳 序列 , 其 协 方差 函数 为 


Ја #п=о, 
sm- 位 车 n#0. 


FO)= pe EAT, 


注意 , 函数 R(n) 可 以 表示 为 
R(n) = endF(A), (19) 


其 中 
Е(А) = / По, ДА) = 2, -т<А<т. (20) 
ар 27 
比较 “ 谱 ” 函数 (17) 和 (20) 式 可 见 , 如 果 例 2 中 的 “ 谱 ” 是 离散 的 , 则 在 例 3 中 
它 是 绝对 连续 的 并 有 常数 的 谱 密度 f(A) = 1/2r. 实际 上 可 以 说 , 序列 є = (en) “由 
具有 同一 强度 的 振动 构成 ". 正 是 因为 这 个 原因 , 与 由 同一 强度 的 不 同色 调 形 成 的 物 
理 “ 白 噪声 ” 类似, 才 把 є = (en) 称 做 “ 白 噪声 ”. 


例 4 移动 平均 序列 BA 3 引进 的 白 噪声 = (en) 出 发 , 组 成 新 的 序列 
& = 和 ак&п-к, (21) 


大 = 一 oo 


其 中 ax 是 复数 , 满足 ， È а <. 


51. #}7УЖФЕШ ИПИ] - 53. 





由 (21) 式 , 可 


= 


cov(éntm Em) = cov(En £0) = У) ап+кйь, 
大 = 一 oo 





因此 = (E) 是 平稳 序列 , 习惯 上 称 做 由 序列 є = (єк) 形成 的 ( 双 侧 ) 移动 平均 序 
Я. 
特别 , 当 所 有 带 负 下 标的 ак 都 等 于 0 ЕЧ, 即 


& = у aren- к 
к=0 

E= (En) 称 做 单 侧 移动 平均 序列 . 与 此 同时 , 车 对 于 一 切 k > Pak = 0, 即 如 果 

En = aosn 十 QlEn-1 十 … 十 apEn-p， (22) 
ДЕ = (En) ЖЖ p 阶 移动 平均 序列 . 

可 以 证 明 (练习 题 3), 对 于 序列 (22), 其 协 方差 函数 R(n) 为 : 
R(n) = / T J(A)dA， 
其 中 谱 密 度 ЛА) 为 í 
ЈО) = „Р-Р, (23) 


В 
Р(г) = ao +а12 +... +ар2Р. 
Я5 自 回归 概 型 设 < = (en) 是 白 噪 声 . 称 随机 变量 序列 上 = (E) 属于 g 阶 
自 回归 概 型 , 如果 对 于 ne Z, 有 
En + bin-1 ++ baén-g = En- (24) 
问 当 系数 bi,… ,bo 满足 何 条 件 时 , 方程 (24) 有 平稳 解 ? 为 回答 所 提问 题 , 首先 


考虑 g = 1 的 情形 : 
п = Qn- + En, (25) 


其 中 a = -bi. 如 果 lal < 1, 则 不 难 验证 , 平稳 序列 = (En): 
& = } afen-i у (26) 
j=0 


是 方程 (25) 的 解 . ( 式 (26) 右 侧 的 级 数 在 均 方 意义 下 收敛 .) REER, 在 具有 有 限 
二 阶 矩 的 平稳 随机 变量 序列 类 中 , E 是 唯一 解 . 事实 上 , 由 (25) ХИК, 得 


k-1 
& = обаа + En = а[о&фл—2 + еп] +En = -- акак + Den-i 
j=0 
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当 上 大 一 co 时 , 由 此 得 


2 
大 一 1 
Е E - + = Efa" Enr]? = а? ЕЕ, = a™ Ee? — 0. 
j=0 





从 而 , 当 |а| < 1 时 方程 (25) 的 平稳 解 存在 , 且 表示 为 (26) 式 的 单 侧 移动 平均 的 形 
式 . 
对 于 任意 9 > 1 的 情形 , 有 类 似 的 结果 : 假如 多 项 式 


Q(z) =1+ 62+: + baz’ (27) 


的 一 切 0 点 都 位 于 单位 圆 之 外 , 则 自 回归 方程 有 解 , 而 且 有 可 表示 为 单 侧 移动 平均 
的 形式 (24) 的 唯一 平稳 解 (练习 题 2). 这 时 , 协 方差 函数 R(n) 可 以 表示 为 (练习 题 
3): 
R(n) = J. T NAFA), FO)= J ; fdv, (28) 
其 中 А í 
ЛО) = г REE (29) 
特别 , 对 于 а= 1 的 情形 , 由 (25) 式 容易 得 到 : PEo = 0, 


Eléol? = R(n) = n>0 


1 а" 
1-ю’ 1- la]? 


(XIF n < 0, R(n) = В(-п)). 这 时 
1 1 
ЛХ = т х aae 


$16 ”这 个 例子 表明 , 在 水 文学 中 建立 概率 模型 时 产生 自 回归 概 型 考虑 某 水 
域 (例如 , 里 海 ), 并 设法 建立 描绘 , 由 于 径流 和 水 表面 的 蒸发 产生 的 振动 , 引起 的 水 
平面 对 平均 水 平 之 偏差 的 概率 模型 . 

假如 以 年 做 计量 单位 , Д Н, 表示 第 п 年 水 域 的 “水 平 ”, 则 可 得 如 下 平衡 方程 : 


Нил = Hn — KS(Hn) + +1, (30) 


ЖР Eny 表示 第 (п +1) 年 的 径流 量 , 以 5(Н) 表示 在 水 平 为 Н 时 水 域 的 表面 
Я, 而 K 是 蒸发 系数 . 

以 ё. = Hn – Н 表示 对 平均 水 平 Н 的 偏差 (Н 是 根据 多 年 的 观测 结果 估计 得 
来 的 ), 假设 5(Н) = 5S( 互 ) + c(H – Н). 由 平衡 方程 (30), 可 见 随机 变量 满足 方程 : 


En+1 = Qén 十 sn+l， (31) 


п. 协 方差 函数 的 谱 表示 .55 





ЖФа=т-сК,е=„ = En - К5(Н). 自然 应 认为 随机 变量 =, 的 均值 为 0, 并 且 作 
为 初始 逼近 , 认为 {s*} 是 不 相关 和 同 分 布 的 . 那么 , 如 同 例 5 中 曾 证 明 的 那样 , ( 当 
la| < 1 时 ) 方程 (31) 有 唯一 平稳 解 , 应 该 将 其 视 为 所 观测 池 中 (历年 ) 形成 的 水 平 
面 振动 的 状态 . 

作为 可 以 由 (理论 ) 模型 (31) 得 到 的 实际 推论 , 我 们 指出 根据 今年 和 往年 的 
观测 结果 ， 预 测 来 年 水 面 的 水 平 的 可 能 性 . 结果 恰好 表明 (AFE 56 的 例 2), 
由 … ,én_1,é&n 的 值 对 量 с: 的 最 优 均 方 线性 估计 , 就 是 en- 

йт 自 回归 和 移动 平均 的 混合 模型 ”如 果 在 方程 (24) 的 右 侧 将 en RR aent 
aien-1 十 … 十 apen-p, 则 得 所 谓 (p,9) 阶 自 回归 和 移动 平均 的 混合 模型 : 


En +1 ++ + п-да 一 aocn 十 alcn-1 十 … 十 apEn-p- (32) 


在 与 例 5 相同 的 假设 条 件 下 , 关于 多 项 式 Q(z) 的 0 点 , 下 面 将 要 证 明 (53 中 定理 3 
的 系 2), 方程 (32) 有 平稳 解 5 = (En), 其 协 方差 函数 为 : 


л 入 
ко) = f е^"аЕ(л), Ро) = | f(v)dv, 
其 中 


~ia)? 


LA P(e 
=al 





З. 赫 尔 格 洛 茨 定理 

定理 (НОЕ (С. Herglotz]) it R(n) 是 均值 为 0 (8) 平稳 随机 序列 
的 协 方差 函数 ， 则 在 ([—-т,л),.#(|-л,л)) 上 存在 一 有 限 测度 F = F(B),B є 
#([-т,т)), 使 对 于 任何 ne 7, 有 


по) = / езера), (88) 


其 中 的 积分 ST einF(dA) 是 集合 [-т,т) 上 的 勒 贝 格 - ЖЫ. 
证 明 对 于 N >1,Ає[-л,л|], 8 


уе SS R(k — le~ ieit (34) 
Ё 2=м К=11=1 А 2 


由 于 R(n) 的 非 负 定性 , 可 见 fw(A) 是 非 负 函 数 . 由 于 对 于 上 一 ! = т, HA (k,1) 的 
个 数 等 于 N 一 |ml, м 


MORE =DD ( К г) В(туе-*"^. (35) 


[т] < М 


Fn(B) = /, у Nd, Вє.#([-т,т)), 
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则 


А В а 
Г еца) = | очо) = | (1-0) ле. жм, (зб) 
-1 一 0; 车 Inl>N. 





测度 Ру, N > 1, APEKI (т, т) Е, 且 对 于 任何 N > 1, Fw[-7,7] = R(0) < 
оо. 从 而 , 测度 Ем, N > 1, 的 族 完备 .可见 根 据 普罗 霍 罗 夫 (IO. В. Прохоров) Ж 
理 (第 三 章 82 定理 1), 存在 数列 {№} с {№} 和 测度 F, 使 Fy, 一 Р. (密度 、 相 
对 列 紧 性 、 弱 收敛 等 概念 , 以 及 普罗 霍 罗 夫 定理 , 显然 可 以 由 概率 测度 移植 到 任何 
有 限 测度 ). 

那么 , 由 (36) 式 可 见 


/ еб (дл) = йт ў en Fy, (dà) = R(n). 
as а И 





所 建立 的 测度 F 集中 在 区 间 [-, т) Е. 在 不 改变 积分 / T P(A) 的 情况 下 , 把 
集中 在 点 + 上 的 “质量 " F({7}) 移 到 点 rk, 可 以 重新 定义 测度 F. 这 样 得 到 的 新 
测度 ( 仍 记 为 F) 就 已 经 集中 在 区 间 (т, т) Е. (关于 恰好 是 在 区 间 [mr) Е, т 
是 在 区 间 (т, п) Е. 选择 和 值 的 合理 性 , 见 第 2 小 节 的 例 1.) 

注 1 表达 式 (33) 中 的 测度 F = F(B), 称 做 协 方差 函数 为 R(n) 的 平稳 序列 
的 谱 测 度 , 而 FO) = Flir, №) Ж-а Ж. 

在 上 面 的 例 2 中 , 谱 测度 是 离散 的 (集中 在 点 和 ,k= 0, 土 1,…). 在 例 3 ~ 6 中 
谱 测度 是 绝对 连续 的 . 

Жо ШШ Р 由 协 方差 函数 唯一 决定 . 事实 上 , BA 和 及 是 两 个 谱 测度 ， 





/ 7 е" Fi (dà) = / R en (4л), пЕ 2. 
由 于 任何 有 界 连续 函数 gA), 可 以 在 区 间 [-r,r) 上 由 三 角 多 项 式 逼 近 , W 
六 g(A)Fi (dà) = f 9(^)Е>(а^), 


由 此 可 见 (对 照 第 二 章 812 定理 2 的 证 明 ), 对 于 任何 В є .#([-л,л)),Е\(В) = 
ЕВ). 

Жз ШЖ е = (En) 是 由 实 随机 变量 E 构成 的 平稳 序列 , 则 R(n) = R-n), 
因而 


Rin) = PO „6 


= / cos АпЕ(ах). 
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4. 练习 题 

1. 由 (11) 式 导 出 (12) R. 

2. 证 明 , 如 果 (27) 式 的 多 项 式 Q(z) 的 一 切 0 点 都 位 于 单位 圆 之 外 , 则 自 
方程 (24) 有 且 唯 一 表示 为 单 侧 移动 平均 的 平稳 解 . 

3. 证 明 序列 (22) 和 (24) 的 谱 函数 有 密度 , 且 分 别 表示 为 公式 (23) 和 (29). 

4 证明, 如果， Ў подр < оо, 则 谱 函数 РОА) 有 密度 УО), 且 由 如 下 公式 : 








E 





я 








10) = 5 У ев) 
表示 , 其 中 级 数 在 复 空间 L = 12([-т,т),.#(|-т, т), А) СЯ, 而 和 是 勒 贝 格 测 
度 . 


82. 正 交 随机 测度 和 随机 积分 


1. 扩充 积分 概念 的 必要 性 ”在 81 中 已 经 讨论 了 协 方差 函数 的 积分 表示 , 并 举 
出 了 具有 两 两 正 交 随机 变量 zk е Z 的 平稳 序列 


&= У ае", (0 
К=-оо 
的 例 . 因此 , 使 我 们 产生 一 种 想法 : 是 否 可 以 将 任意 平稳 序列 表示 为 , 和 式 (1) 之 相 
应 积分 推广 的 形式 . 
假如 设 
2(^)= У 2, (2) 
{k:zk SA} 
则 (1) 式 可 以 写 为 
= У einAZ(Ah)， (3) 
大 一 一 oo 
其 中 AZ(Ak) = 2(№) — 2(Ак—) = а. 
R (3) 的 右 侧 是 “ 勒 贝 格 一 斯 蒂 尔 切 斯 积分 ” 


/ 7 eindZ(A) 


的 积分 和 . 然而 , 对 于 现在 所 考虑 的 情形 , 函数 Z(A) 也 是 (依赖 于 w 的 ) 随机 变量 . 
在 这 种 情形 下 , 为 说 清楚 任意 平稳 序列 的 积分 表示 , 不 得 不 也 考虑 这 样 的 函数 ZA): 
对 于 每 一 个 w,，Z(A) 有 无 界 变 差 . 因此 对 于 每 一 个 w, 简单 地 把 上 述 积分 理解 为 黎 
$ 一 斯 蒂 尔 切 斯 积分 是 不 可 行 的 . 
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2. 随机 测度 “与 勒 贝 格 积分 , 勒 贝 格 一 斯 蒂 尔 切 斯 积分 以 及 黎 曼 一 斯 蒂 尔 切 
斯 积分 的 一 般 概念 类 似 (第 二 章 56) 从 定义 随机 测度 开始 讨论 我 们 所 感 兴趣 的 情形 . 

Я (OF, P) 是 概率 空间 , Е 是 某 一 集合 , # 是 集合 Е 子 集 的 代数 , 而 多 = 
algo) 是 o- КЖ. 

定义 1 对 于 weQ 和 人 Ae 名 0, 定义 的 复数 值 函数 Z(A) = 2(0, A), 称 做 有 
限 - 可 加 随机 测度 , ШЖ 

1) 对 于 任意 А є Zo, E|Z(A)|? < оо; 

2) 对 于 Zo 中 任意 两 个 不 相交 集合 А, 和 A 


Z(A1+A2)= Z(A1)+ Z(A2) (Р-а.с.). (4) 


定义 2 有限 一 可 加 随机 测度 Z(A), 称 做 初等 随机 测度 , 如 果 对 于 # PE 
意 两 两 不 相交 集合 A, A2,…, 其 中 A = Al+Az+:…ego, 有 
2 


Е 一 0 п оо. (5) 





2(A) - 2 Z(Ax) 
k=l 





注 1 在 8 的 集合 上 的 初等 随机 测度 的 定义 中 , 假设 随机 测度 的 值 属 于 希 尔 
伯 特 空间 Н? = HF, P), 而 该 测度 在 (5) 式 的 均 方 意义 上 是 可 数 可 加 的 . 尚 存 
在 随机 测度 的 其 他 定义 , 在 这 些 定义 中 不 要 求 存在 二 阶 矩 , 而 且 也 不 要 求 测度 在 (5) 
式 的 均 方 意义 上 可 数 - 可 加 性 , 例如 要 求 在 依 概 率 收敛 或 以 概率 1 收敛 的 意义 上 可 
数 一 可 加 . 

注 2 与 非 随机 测度 的 情形 类 似 , 可 以 证 明 : 对 于 有 限 一 可 加 随机 测度 ,“ 在 
(5) 式 的 均 方 意义 上 的 可 数 可 加 性 ”, 等 价 于 “在 均 方 意义 上 在 ‘0’ 的 连续 性 ”: 


Е|2(А„)|? 0, Anl Ø, An со. (6) 


在 初等 随机 测度 类 中 , 按 下 面 定义 的 正 交 测度 特别 重要 . 
定义 3 ”初等 随机 测度 Z(A),A с Zo, 称 做 正 交 测 度 (或 具有 正 交 值 的 测度 )， 
如 果 对 于 go 中 任意 两 个 不 相交 集合 A 和 A2, 有 





EZ(A1)2(A2) = 0, (т) 
或 者 等 价 地 , 如 果 对 于 go 中 任意 两 个 集合 Al 和 A, 有 
Е2(А,)2(А») = E|Z(A; N A2)l?. (8) 
记 
т(А) = Е|2(4)2, дє. (9) 


AI, 对 于 初等 正 交 随 机 测度 , 集 函数 т = т(А), А є Zo, 是 有 限 测度 , 从 而 根据 卡 
ЗЕМ (С. Carathéodory) 定理 (第 二 章 53), m(A) 可 以 延 拓 到 (Е,8) Е. 这 样 ， 
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得 到 的 测度 仍然 记 作 т = mA), 并 称 之 为 (初等 正 交 随机 测度 7 = 2(Л),А € бо, 
的 ) 构造 函数 . 

现在 自然 产生 如 下 问题 : 既然 定义 在 (Е, Zo) 上 的 集 函数 m = mA) 可 以 延 拓 到 
(Е,&) Е, Жр Z = 0(2,), 那么 是 否 可 以 将 初等 正 交 随机 测度 Z= 2(А), A Е &o, 
延 拓 到 集合 ДЕЯ Е. 并 且 使 m(A) = Е|2(А)?, ДЕЯ. 

对 该 问题 的 回答 是 肯定 的 , 这 可 以 由 下 面 的 构造 证 明 . 与 此 同时 由 这 一 构造 还 
可 以 建立 , 平稳 序列 的 积分 表现 所 需要 的 随机 积分 . 

3. 随机 积分 设 Z = ZA), A ego 是 初等 正 交 随 机 测度 , 而 т = m(A),A є 
Zo 是 其 构造 函数 . 对 于 每 一 个 只 有 有 限 个 不 同 (复数 ) 值 的 函数 


Р) = УЉА, (А), Ак E€ Eo, (10) 
定义 随机 变量 
F) = У /к7(М). 
设 D = (E, 8, т) 是 希 尔 伯 特 复数 值 函数 的 空间 , 其 数 积 为 


и.) = Јата), 


Но If = (Sf), 而 Н? = НЗ, Я ,Р) 是 希 尔 伯 特 复 随机 变量 的 空间 , 相 
应 的 数 积 为 
(6,1) = EST, 
范 数 为 1|| = (=, 6) "72. 
那么 , 显然 对 于 任意 两 个 形 如 (10) 式 的 函数 f 和 g, 有 


(F) Z 9) = 49, 


IFAN? = ПА = 人 vaPmaA 
MER ле L, 而 {fn} 是 形 如 (10) 式 的 函数 , 满足 IS- fall 一 0,n — oo (Ж 
练习 题 2). 那么 当 n,m 一 co 时 , 有 
1P n) -F (fm)ll = ПА fnll > 0. 


从 而 , 序列 {77 (Ла) 在 均 方 意义 上 是 基本 的 , 而 由 第 二 章 810 的 定理 7, 可见 存在 随 
机 变量 ( 记 作 7707), WEZ) є Н? НЧ n> оо № |7 (n) -Z A) > 0. 

这 样 建立 的 随机 变量 Z (S) (精确 到 随机 等 价 性 ) 唯一 , 而 且 与 逼近 序列 {fn} 的 
选择 无 关 . 自然 把 S (f) 称 做 函数 f EL 为 关于 初等 正 交 随机 测度 2 的 随机 积分 ， 
并 且 为 了 直观 (与 (Л) 同时 ) 使 用 “积分 ”记号 : 


j 10)2(дА). 
Е 
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现在 指出 随机 积分 (Г) 的 下 列 性 质 , 这 些 性 质 可 以 直接 由 其 构造 得 出 . 设 函 
数 g, f, fn € L’, 那么 


FAF 9))= (F9) (11) 
IFAI = If (12) 
F (af +5) = 49707) +97 (д) (P - a.c.), аз) 


其 中 a 和。 是 常数 ; 若 当 一 оо 时 , |. — fI 0, 则 
IF Gn) -FN 0. (14) 


4. 随机 测度 的 延 拓 ”将 上 面 定义 的 随机 积分 用 于 初等 正 交 测度 2(Д), А є 
Eo, 到 区 = o(8o) 中 集合 的 延 拓 . 

由 于 假设 测度 т 是 有 限 的 , 则 对 于 任意 A є #0, 函数 ГА = Ia) є 17. 记 
(А) = (Ia)， 显 然 , 对 于 A cgo 有 2(А) = Z(A)， 由 (13) 式 可 见 , 如果 
А, ПА» = 2,A1,A2 € E, W 


(А, + А») = 2(А41) +Z(A2) (P - a.c.), 


而 由 (12) 式 , 得 
Е|2(Л)? =m(A), Д є. 


现在 证 明 , 集合 2(А),А с g, 的 随机 函数 , 是 在 均 方 意义 上 可 数 可 加 的 . 事实 
上 , 设 Aeg, A= у, Ar, 则 
=] 


204) - > 2(Аь) = (а), 
k=1 


其 中 „ т 
mA) = Та(А) – УА, (А) = (А), D= У) А. 
k=1 k=n+1 
但 是 2 
ELF (gn)? = 19.12 = т ( у м) 10, n= оо, 
k=n+1 
ш 


2 


—0, п о. 


вы -у2(^ь) 
k=1 





由 (11) 式 可 见 , 对 于 А, ПА» = 2,Ai,A2 EB, 有 


EZ(A1)Z(A2) = 0. 
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这 样 所 建立 定义 在 集合 A cg 上 的 随机 函数 ZA), 是 在 均 方 意义 上 可 数 可 加 
的 , 并 且 在 集合 A € # 上 等 于 Z(A). 我 们 称 Z(A), A с 8 (作为 初等 正 交 随 机 测 
度 Z(A) 的 延 拓 ) 是 以 m(A), A c g, 为 构造 函数 的 正 交 随机 测度 , 而 上 面 定义 的 积 
分 | логах 称 做 关于 该 测度 的 随机 积分 


5. 正 交 增 量 随机 过 程 现在 考虑 对 我 们 的 目的 最 重要 的 情形 , 即 (E, 多 ) = 
(R,. 罗 (R)) КЖ. 由 第 二 章 83 定理 1 м, Z (в,.9(в)) 上 的 任何 有 限 测 度 
т = m(A), 都 与 某 一 (广义 ) 分 布 函 数 G = G) 相互 一 一 对 应 , В т(а,Ь] = 
G(b) ~ С(а). 

结果 表明 , 对 于 正 交 测 度 有 同样 的 情形 . 下 面 引进 正 交 增 量 随机 过 程 的 概念 . 

定义 4 ”概率 空间 (9,. 多 ,P) 上 (复数 值 ) 随机 变量 {Z\},Ae В, 的 全 体 , 称 做 
正 交 增 量 随机 过 程 , 如 果 

1) Е|2,|?2<оо,Ає R; 

2) 对 于 每 一 个 入 eR， 





Е|2,-2„|?—ә0, АА, An ER; 
3) 对 于 任意 А, < № < < м, 
Е(2\, — 2, ) (2, — Za) =0. 
条 件 3) 是 增 量 的 正 交 性 条 件 . 条 件 1) ЖЖ 2) с Н?. 最 后 , 条 件 2) 具有 技术 
的 特点 , 表示 要 求 在 每 一 点 A ER (在 均 方 意义 上 ) 上 是 右 连续 的 . 
设 2 = 2(^) 是 以 m= m(A) 为 构造 函数 的 正 交 随 机 测度 , 是 (广义 ) 分 布 函数 


为 G = G(A) 的 有 限 测度 . 记 
Zx = 2(-оо, Л]. 


那么 , ElZA|? = т(-оо, А] = С(А) < оо,Е|2, — Zan |? = т(А, À] | 0, àn | А, ЖНЖ 
件 (3) 显然 也 成 立 . 因此 , 所 建立 的 过 程 Z(A) 是 正 交 增 量 过 程 . 
另 一 方面 , ШЖ С = GA) 是 广义 分 布 函数 , Н G(-oo) = 0,С(+оо) < оо; 而 
{2} 是 正 交 增 量 过 程 , H Е|2,|? = С(А), 则 对 于 A є (a,b), 设 
2(А) = 22-24. 
设 8o 是 形 如 А = Уан) 的 集合 产生 的 代数 ;而 Z(A) = У да). 显然 
=l 一 
Е|2(А) = т(А), 


其 中 mA) = Ў) — (а), 而 对 于 不 相交 区 间 Al = (а,Ь 和 As = (a2, b2], 
к=1 


有 
EZ(A1)2(A2) = 0. 
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因为 函数 G(A),A є В, 右 连续 , 故 由 此 可 见 2 = 2(А), А є Zo, 是 具有 正 交 值 
的 初等 随机 测度 . 集 函 数 л = mA), A є Eo, 唯一 地 延 拓 到 多 = BR) 上 的 测度 ， 
而 由 前 面 的 构造 可 见 , 那么 Z= Z(A),A Е Zo 也 可 以 延 拓 到 A є = (В). 这 
时 , 有 

Е|2(А)? = т(А), A € 2(R). 

设 {2 лев, 是 正 交 增 量 过 程 , ElZA| = С(А),С(—оо) = 0,G(+00) < оо; 而 
Z = Z(A), A € B(R), 是 构造 函数 为 m = m(A) 的 正 交 随机 测度 , 那么 , 由 以 上 的 论 
述 可 见 , 在 {2} 与 m = mA) 之 间 存 在 一 一 对 应 关系 , 使 


Zx = 2(-со,Л], С(А) = т(—оо, А] 





和 
(а,Ь) = Zs — Za, т(а,} = G(b) – С(а). 

根据 在 勒 贝 格 一 斯 蒂 尔 切 斯 和 黎 曼 一 斯 蒂 尔 切 斯 积分 理论 (第 二 章 86 第 9 和 第 
11 小 节 ) 中 通用 的 记号 , 对 于 某 一 正 交 增 量 随 机 过 程 {Z、}, 把 随机 积分 Ja FAZ 
理解 为 与 该 过 程 {Z、} 相对 应 的 、 正 交 随 机 测度 的 随机 积分 JR f(X)Z(d). 

6. 练习 题 

1. 证 明 条 件 (5) 和 (6) 等 价 . 

2. 设 函数 / є 12. 利用 第 二 章 的 结果 (第 二 章 , $4 的 定理 1, 86 定理 3 的 系 以 及 
$3 的 练习 题 8), 证 明 存 在 形 如 (10) 式 的 函数 序列 {fn}, 使 | — fI — 0,п — оо. 

3. 设 Z(A) 是 以 m(A) 为 构造 函数 的 正 交 随机 测度 , 证 明 下 列 性 质 : 

El2(A1) - Z(Aa)| = m(A1AA2), 
Z(A1\ 42) = 2(А1) - 2(А.ПА2) (Р-а.с.), 
АД: АА») = Z(A1) + 2(A2) - 2244. ПА2) (Р-а.с.). 


$3. 55 (广义 ) 平稳 序列 的 谱 表 示 


1. 平稳 随机 序列 谱 表 示 E= (En) 是 平稳 随机 序列 , Eén = 0,n є Z, 则 根据 
81 的 定理 存在 ([-т,л),.#(|—т,т))) 上 的 有 限 测度 , 使 协 方差 函数 Rn) = cov(&k+n， 
&) 有 如 下 表现 : Ў 
В(п) = 1 en F(dA). @) 
下 面 的 结果 给 出 了 序列 E= (E)n є 2, 的 相应 谱 表示 . 
定理 1 存在 正 交 随 机 测度 Z= Z(A),Ae . 罗 ([-7,7)), 使 对 于 每 一 个 ne ZZ， 


以 概率 1, 有 
„> = б ©» (ал) [= in (ал) |. 2) 
к= Г е“ ›( / ( ) ( 
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这 时 EZ(A) = 0,Е|2(А)|? = F(A). 

证 明 利用 希 尔 伯 特 空间 的 有 关 结 果 , 进行 证 明 最 为 简单 . 

设 D(F) = І(Е,#, Р) 是 复 值 函数 的 希 尔 伯 特 空间 , Е = [—л,л),# = 
#([-т,т)), 其 中 定义 了 内 积 


(д) = 三 J(CA)9(AJF(dA)， (3) 


М 1З(Е)(1(Е) С 12(Е)) 是 由 en = е(Л), п Е Z, 生成 的 线性 流 形 , 其 中 en( 和 ) = ей". 
ЯЛ, 由 于 Е = (т, т), 而 测度 F AR, 可 见 流 形 LF) 的 闭 包 与 L) 相等 
(练习 题 1): 
ТЕ) = І?(Р). 
其 次 , 9 1206) 是 由 随机 变量 Enn c Z, 生成 的 线性 流 形 , ЇЇ LEH RE) 是 
(关于 测度 Р 的 ) ЙМЫ. 
我 们 现在 建立 随机 元 [3(F) 与 LE) 之 间 一 一 对 应 “一 ”关系 , 设 


еп ё, ПЕЙ, (4) 
并 且 对 于 任意 随机 元 (确切 地 说 , 对 于 任意 等 价 随机 元 类 ), 按 线性 关系 补充 广义 为 
Danen Ө} аһ (5) 


(这 里 假设 只 有 有 限 个 复数 an 不 为 0). 

注意 , 对 应 关系 (5) 式 在 如 下 意义 上 是 适 定 的 : 对 于 测度 Е 几乎 所 有 У anen = 
о, 当 且 仅 当 , 对 于 测度 P 几乎 必然 Уол, = 0. 

这 样 定义 的 对 应 关系 “”, 称 做 等 距 的 , 即 保持 内 积 不 变 的 . 事实 上 , 由 (3) 式 ， 
有 


lemen) = {eam F(a = {FN) 
= R(n — т) = Eéném = (én,ém), 


而 且 类 似 地 有 
(Zanen: Y. Bren) = (Уан, Уһ). (6) 

WME n € LE). 由 于 LE) = LZE), 则 存在 随机 变量 序列 (mn), 使 mw < LE) 
和 | — | > 0,n — оо. 从 而 (m) 是 基本 随机 变量 序列 , 说 明 函 数 (fn) 也 是 基本 
随机 变量 序列 , 其 中 fn є LF) E ў, > т. 由 于 空间 LF) 是 完备 的 , 因而 存在 
函数 fe LF), № № – Л > 0,п — o0. 

显然 相反 的 结果 也 成 立 : WE Ге LF), В |. - Л 0, fa € LF), WEE 
这 样 的 元 素 ne 12(©), 使 加 < LIE) F limn -nll > 0n > оо В т = fn- 
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至 此 , (等 距 ) 对 应 关系 “~”, 暂时 仅 在 LE) 和 LBE) 元 素 之 间 得 以 证 明 . 根 
据 连续 性 , 将 此 对 应 关系 补充 定义 : Bno f, 其 中 у 和 7 是 上 面 所 考虑 的 元 素 . 不 
难 验证 , 所 建立 的 对 应 关系 是 (等 价 随机 变量 类 与 函数 类 之 间 的 ) 线性 的 和 保持 内 积 
不 变 的 一 一 对 应 关系 . 

考虑 函数 SA) = Ial), 其 中 А € .#([-т,л)),А Е [x,7), 并 设 ZA) є LE) 
是 满足 L(A) = Z(A) 的 元 素 . 显然 (А) = F(A), 因而 BIZ(A)l? = F(A). 由 
于 ЕЕ, = 0,n € Z, 故 对 于 每 一 个 元 素 LIE) (从 而 , 对 于 LE), 其 数学 期 望 等 于 0. 
特别 EZ(A) = 0. 此 外 , ШЖ A ПА» = ©, 则 EZ(A1)2(A2) =0 且 


2 





一 0， n= оо, 


ваа -zy 


k=1 





其 中 人 A= Alt+A2+…. 
这 样 , 元 素 的 全 体 Z = Z(A),A e #([—т,л)) 本 身 是 正 交 随机 测度 , 因此 (由 于 
$2) 由 该 测度 可 以 定义 随机 积分 


7 = 三 J()Z(dA)，fe ГЕ). 


设 Fe Z2(F) т f В Ф(/) 表示 元 素 n (确切 地 说 , 在 每 一 等 价 随机 变量 类 
与 函数 类 中 , 选 一 个 元 素 作为 代表 ). 现在 证 明 , 以 概率 1, 有 


Я) = Ф(/). (7) 
事实 上 , 如 果 
FA) = > ока, (A) (9) 
是 函数 IA, (А), Ar = (ax, bi), 的 有 限 线性 组 合 , 则 根据 随机 积分 的 定义 , ERY (S) = 
ar2(Ak) 等 于 (1)， 因 此 对 于 函数 (8), (7) RRX. Æ, ШЖ у є Z2(F) В 
| 所 一 州 一 0, 其 中 f 是 形 如 (8) 式 的 函数 , 则 |Ф(/„) — Ф(/)| — 0, 而 根据 82 的 
(14) R IF (fn) - 7-0. 从 而 , 以 概率 1 有 Ф(/) =. 
WER f(A) = е", Шш (4) 式 可 见 bi) = in 另 一 方面 , (7) = 
/f(A)2Z(d 和 ). FÆ, 由 (т) 式 可 见 , 以 概率 1, 有 


En =f е?" Z(dà), пЕР. о 


Я! E= (En) 是 平稳 随机 序列 , 由 实 值 随机 变量 Enn є 7 构成 . ЖА, Ж 
表达 式 (2) 中 的 随机 测度 Z = Z(A) 具有 如 下 性 质 : 对 于 任何 A c . 罗 ([ 一 mm))， 


ДА) = 2(—А), (9) 


其 中 集合 -A = {和 :一 和 eA}. 
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事实 上 , 设 ЛА) = аке“ 和 7 = Уор (两 个 和 式 都 是 有 限 的 )， 那 么 ， 
ел, 
n=) arh Ө Уак" = (СА). (10) 
由 于 JA( 和 ) < Z(A), 则 由 (10) 式 , ЗГ ЈА (-А)  2(А) (或 等 价 地 IA(X) > 2(А)). 
另 一 方面 , 因为 А (А) = Z(-A), 所 以 ZA) = 2(-Д)(Р -а.с.). 
R2 {= (En) 是 平稳 随机 序列 , 其 中 是 实 值 随机 变量 , 而 Z(A) = 2(А)+ 
125(А). ЖА, 对 于 任意 A, A2 e . 罗 ([-r,m)), 有 
EZ1(A1)22(A2) = 0, (11) 
ЗВ, WR д, ПА = M (-А,) ПА» = е, Ш 
EZ (А!) 21 (42) =0, EZ2(A1)Z2(A2) = 0. (12) 
事实 上 , 由 于 Z(A) = 2(-А), 则 
21(-A) = 21(А), 22(-А) = -2Z2(A). (13) 
其 次 , 因为 B2(A1)2(A2) = EZ(A: ПА), 
ImEZ(A1)Z(A2) = 0, 
即 
EZ1(A1)2Z2(A2) - EZ2(A1)Z1(A2) = 0. (14) 
将 Al 换 成 区 间 -Ai, 则 得 





EZ1(-A1)22(A2) - EZ2(—A1)Z1(A2) = 0, 
故 由 于 (13) 式 , 由 此 得 
EZ1(A1)2Z2(A2) + EZ2(A1)Z1(A2) = 0. (15) 


由 (14) 和 (15) 式 得 等 式 (11). . 

ШЖ ANA: = 2 和 (-Д,)ПА = ©, W EZ(A1)Z(A2) = 0. ИЕ 
ReEZ(A1)2(A2) = 0 和 ВеЕ2(—А,)2(А») = 0. FÆ, 连同 (13) 式 就 证 明了 等 
式 (12). 

ЖЗ ЖС-= (6) 是 高 斯 序列 . 那么 ,对 于 任意 Al,… ,Ak, 向 量 (2Z1(A1),…， 
2\(А&); 2Z2(A1),… ,2Z2(Ak)) 服从 高 斯 (ES) 分 布 . 

事实 上 , 由 (复数 值 ) 高 斯 随机 变量 n, 即 由 服从 高 斯 分 布 的 向 量 (Re п, Im п) 生 
成 的 线性 流 形 120), 服从 高 斯 分 布 . 那么 , 根据 第 二 章 813 第 5 小 节 , М, LE) 
的 闭 包 LE 也 由 高 斯 随机 变量 构成 ， 因 此 由 系 2 知 , 对 于 高 斯 序列 上 = (En), 
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实 部 7, MER 75 在 如 下 意义 上 独立 : 任意 随机 变量 组 (Z1(A1),… ,2Z1(Ak)) 和 
(2Z2(A1),… ,22(Ak)) 相互 独立 .由 (12) 知 , HFE А, Д; = (-А) ПД; = 
2,11] 二 1,… ,上 ,i 关 j, 的 集合 A1,… Дь, 随机 变量 Zi;(A1),… ,Zi(Ak)(i = 1,2) 
全 体 独 立 . 

Жа REE) 是 平稳 实 值 随机 变量 序列 , 则 以 概率 1 


Я ч 
„= ] cos XiZi(dA) — / sin MnZ2(d 和 A). (16) 


Ж 如 果 {2A},Ae [-т,л) 是 对 应 于 正 交 随机 测度 Z= ZA) 的 正 交 增 量 随机 
过 程 , 则 谱 表 示 (2) (根据 82) 可 以 表示 为 如 下 形式 : 


ё. = f е "42, nez. (17) 
2. 由 平稳 序列 经 线性 变换 得 到 的 随机 变量 的 构造 设 = En) 是 具有 谱 分 解 


(2) 的 平稳 序列 , 而 n є LE). 下 面 的 定理 描绘 这 样 随机 变量 y 的 构造 . 
定理 2 №1175), MAELK pE 12(Е), 使 以 概率 1, 有 


= Г (А) 2 (4). (18) 
证 明 ШЖ 
m= У о, (19) 
|к\<п. 
则 由 于 (2) R, 有 
т = / 7 > оке?" | 2(9А), (20) 
7" (ksn 
即 对 于 函数 
Ф(А) = У оге", (21) 


Ilklsn 

(18) 式 成 立 . 在 一 般 情形 下 , ШЖ пе LE), 则 存在 形 如 (19) 式 的 随机 变量 nm, 使 
иљ — 0, — оо. ЖА, [фи 一 pmll = [тв — з] 一 0,n,m — оо, 即 序列 (pn) 在 
L2(F) 中 是 基本 序列 . 因此 , 存在 函数 pe (Р), 使 lo — pnl] 一 0,n > оо. 

根据 82 的 (14) R F lpn) -Z (o)l — 0, МАХ m = F (еп), 所 以 以 概率 1, 
Ж п = .9(0). o 

Ж 设 Hol) 和 Ho(F) 是 相应 为 变量 89 = (&„)„<о 和 函数 e = (є„)„<о 封闭 
线性 流 形 . ЖА, 如 果 пе Нос), 则 存在 这 样 一 个 函数 pe Но(Р), 使 以 概率 1, 有 


n= [| ма. 
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з. 线性 滤波 器 ”公式 (18) 描绘 经 线性 变换 , 由 énn є Z 得 到 的 随机 变量 , 即 
可 以 表示 为 形 如 (19) 的 随机 变量 及 其 均 方 极限 的 构造 . 

利用 所 谓 (线性 ) 洪波 器 表示 的 线性 变换 类 , 是 特殊 然而 重要 的 线性 变换 类 . B 
设 在 某 系统 (滤波 器 ) 入 口 寺 时刻 т 出 现 信号 zm, 而 这 时 系统 对 该 信号 的 反映 是 : 
在 其 出 口 于 时 刻 n 收 到 信号 h(n — m)zw, 其 中 h(s),s є Z, 是 某 一 复数 值 函 数 , 称 为 
(滤波 器 的 ) 脉冲 转移 函数 . 

这 样 , 在 系统 输出 的 和 信号 y,, 可 以 表示 为 : 


= Ў п (п — ттт. * (22) 
对 于 物理 可 实现 的 系统 , 输出 信号 的 值 只 由 “过 去 ”的 值 决定 , 即 由 т (т < п) 
值 决定 . 如 果 对 于 一 切 s < 0 有 h(s) = 0, 或 如 果 


Yn = У h(n – т)тт = Ў h(m)zn_m, (23) 
т=-оо =0 
则 自然 称 脉冲 转移 函数 为 = hls) 的 滤波 器 是 物理 可 实现 的 . 

称 为 滤波 器 的 频率 特征 的 、 脉 冲 转移 函数 h 的 傅 里 叶 变换 


(à) = У ет (т), (24) 
是 以 /为 脉冲 转移 函数 的 滤波 器 的 重要 谱 特 征 . 
现在 考虑 关于 (22) 和 (24) 式 中 级 数 的 收敛 条 件 . 这 些 条 件 到 目前 为 止 尚未 得 
到 说 明 。 假 设 在 滤波 器 的 入 口 发 送 具 有 协 方差 函数 为 R(n) 和 谱 分 解 (2) 的 、 平 稳 
随机 序列 h(s),s є Z. WA, 如 果 





h(k)R(L ЮВ < оо, (25) 


КА=-оо 


ЯНА Ў нот 均 方 收敛 ,因而 平稳 序列 = (m) 有 定义 , 其 中 


т = Èo -т) = D һ(т)&—т- (26) 
按 谱 分 析 的 术语 , 条 件 (25) 显然 等 价 于 (А) є LF), ВП 
Г оер) <o. (27) 
在 (25) 式 或 (27) 式 的 条 件 下 , 由 (26) RA (2) R, 可 得 序列 7 的 谱 表现 


т = Г. einp(A)Z(dA) < оо, пє 2. (28) 
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从 而 , 序列 7 的 协 方差 函数 Р, (п) 由 如 下 公式 确定 : 
R(n) = Г е" (АЕ (АА) < оо. (29) 


特别 , 如 果 在 频率 特征 为 x = (А) 的 滤波 器 入 口传 送 白 噪声 є = (en), 则 在 其 出 口 
将 收 到 平稳 移动 均值 序列 : 





т = Ў? т), т, (30) 
其 谱 密度 为 | 
ҺО) = 510). 

下 面 的 定理 在 一 定 意义 上 说 明 , 任何 有 谱 密度 的 平稳 序列 可 以 由 移动 均值 得 到 . 

定理 3 Жл= (м) 是 谱 密 度 为 万 ( 和 ) 的 平稳 序列 , 则 存在 这 样 的 白 噪声 序列 
== (En) 和 这 样 的 滤波 器 (必要 时 扩充 原 概率 空间 ), 使 表达 式 (30) 成 立 . 

证 明 由 给 定 的 ( 非 负 ) 函数 方 ()， 存 在 这 样 的 函数 у), E ЛА) = 
(т) ЦР. 由 于 


fi 万 (MA)jdA < co， 故 (А) Е (аи), 


这 里 du Ж [—л,л) 上 的 勒 贝 格 测度 . 因此 , 函数 ул) 可 以 表示 为 他 里 时 级 数 (24), 
其 中 ы 
мт) = = | emoaan, 


并 且 收 敛 性 应 理解 为 


Е 


2 


(А) – У) етт) 


|т|<п 


ал 一 0，7m оо. 








设 т 
- м MNA ейл) < co，neZ. 
除了 测度 2 = Z(A) 之 外 , 我 们 再 引进 不 依赖 于 Z= Z(A) 的 、 新 的 正 交 随 机 测度 
2 = 20А), 并 满足 E|Ž(a,b)|? = (b 一 a)/(27). (一 般 , 建立 这 样 测度 的 可 能 性 , 应 以 原 
概率 空间 充分 “丰富 ” 为 前 提 .) 设 


204) = | PANZA + | п- е® оуу оў (ал), 





53. 58 (广义 ) 平稳 序列 的 谱 表示 - 69 - 





随机 测度 Z = Z(A) 是 具有 正 交 值 的 测度 , 这 时 对 于 任何 A = (a,b), 
Ед)? = 5; | PAREPA E f п- е®дуе дуал = A, 
其 中 |A| =р-а. 因此 , 平稳 序列 = = (es),n € Z, ЕРЕ, 其 中 
en= / "ем ах. 
现在 , 注意 到 
S AZA = | енда) = ть: (8) 


而 另 一 方面 , 根据 (А) 的 定义 和 82 的 性 质 (14), 以 概率 1, 有 
i etiAnp(A)Z(dA) = jf е" ( У бтн) 2(ал) 


= э ntm) 及 в -тУ (ал) = у h(m)en_m, 
于 是 , 注意 到 (31) 式 就 证 明了 表达 式 (30). o 


Ж 如 果 ( 按 勒 贝 格 测度 几乎 处 处 ) f(A) > 0, 则 引进 辅助 测度 2 = Z(A) 就 没 
有 必要 (因为 这 时 勒 贝 格 测度 几乎 处 处 1 — 8(A)p(A) = 0), 而 且 “ 原 概率 空间 充分 
“丰富 '” 的 前 提 条 件 也 可 以 去 掉 . 

ЖІ 假设 谱 密 度 ( 按 勒 贝 格 测度 几乎 处 处 的 ) (А) > 0, 并 且 


А0) = 500), 
其 中 Е и 
P(A) = De ик), УМАР < оо, 
k=0 k=0 


则 序列 可 以 表示 为 单 侧 移动 平均 的 形式 


en 
m=0 
特别 , 设 P(z) = ao +а12 + --- +арг?, 则 谱 密度 为 
= 去 IPT 
ИЛЯт= (№) 可 以 表示 为 


Та = ап + alEn-1 +++ @рЕп-р- 
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系 2 НИ: = (En) 是 平稳 序列 , 具有 有 理 谱 密度 
2 


1 | P(e) (32) 


© 2л (Q) 





КО) 





其 中 P(z) = ao + аг +++ + арр, (2) = 1+12+---+42%. 
如 果 多 项 式 Q(z) 在 集合 {z :|z| = 1} 上 无 0 点 , 则 存在 这 样 的 白 噪声 & = (en), 
使 以 概率 1, 有 


En+bén-1+.**+boén-g = aocn + QlEn-1+ "+ арр (33) 

ЖА, 设 5 = (En) 是 任意 平稳 序列 , 并 且 满 足 这 样 带 某 白 噪声 = (en) 的 方程 

(33), 以 及 在 集合 {z : |z| = 1} 上 无 0 点 的 多 项 式 Q(z), 则 © = (En) 有 谱 密 度 (32) 

式 . 

事实 上 , 设 加 = 名 十 tn-1 十 … 十 btn-4. ЖА, 
HA = IPEP, 


而 由 系 1 得 所 要 求 的 表达 式 . 
另 一 方面 , 如 果 表 达 式 (33) 成 立 , 而 Fe( 和 ) 和 F(A) 是 序列 和 的 谱 函数 , 则 


入 A 
Ру) = [ QEPARO) = з Í рете) Pav. 


由 于 Q(t)? > 0, 故 由 此 得 由 (32) 式 确定 的 密度 . 

а. 遍历 性 定理 ”下面 ( 均 方 意义 下 的 ) 遍历 性 定理 , 可 以 看 做 弱 平稳 随机 序列 
的 大 数 定律 的 类 似 . 

定理 4 &&=(&),пє 7, 是 任意 平稳 序列 ,En =0, 且 具 有 协 方差 函数 (1) 
式 和 谱 分 解 (2) 式 , 则 





п-1 2 
Уа 2,200} вч) 
k=0 
® n=l 
Уди) > FAO). (35) 
k=0 
证 明 由 (2) 式 , 可见 
n=l т п-1 п 
Das [| ED za = / мудах), 
k=0 Ж к=0 E 
其 中 
Е ШИЙ, в) 
п ч = е эа, 
по веет FAFO. 


33. 88 (广义 ) 平稳 序列 的 谱 表 示 n- 





显然 , |pn(A)| < 1. 
其 次 , 由 于 ры), Koj(A), 因此 由 82 的 性 质 (14), 有 


Г оода Ef поуоудалу = zao, 


+ Ж (34) 式 得 证 . 
类 似 地 可 以 证 明 结论 (35) R. о 
Ж 由 于 , 如 果 谱 函 数 在 0 点 连续 , 即 F({0}) = 0, Я 2({0}) = 0(P —а.с.), 可 
见 (34) 式 和 (35) R, 有 


122 pel 12 
SDRE) 02 2 у 20. 
к=0 大 =0 




















由 于 
үл! 2 ул! 2 1! 2 
75780) = Е 人 а) &| < ЕРЕ уа, 
大 =0 大 =0 k=0 
可 见 相反 得 北 涵 关系 也 成 立 : 
12 12 = 
РЭС" 0 „Р RD 一 0 
k=0 k=0 


这 样 ， 算 术 平 均值 n-! У о, (在 均 方 意义 下 ) 收敛 于 0 的 充分 和 必要 条 件 是 
n-! үй (к) — 0. 由 此 可 见 , 如 果 原 序列 随机 变量 的 数学 期 望 为 mE = т), 则 


к= аст 12 
„РЕ 052 & 20, (37) 
к=0 к=0 


其 中 R(n) = EEn — Е&„)(& 一 Еб). 
我 们 还 要 指出 , 如 果 以 大 于 0 的 概率 2({0}) 7 0, 则 说 明 序列 6, 包含 “随机 常 
Жо”: 
én = а + т, 
其 中 a = 2({0}), 而 在 谱 表 示 


m= / во") 
Ё 


中 测度 Zu = 2,(Д) 已 经 满足 2Z,({0}) = 0(P – а.с.). 结论 (34) 式 说 明 , 算术 平均 恰 
好 均 方 收敛 于 这 一 随机 常数 a 
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5. 练习 题 

1. 证明 72(Р) = 12(Е) (记号 见 定理 1 的 证 明 ). 

2. 设 上 = (&n) 是 平稳 序列 , 具有 性 质 : 对 某 个 М 和 一 切 ww 有 вм = En. 证 明 
这 一 序列 的 谱 表 示 归 结 为 81 的 表示 (13) 式 . 

3. 设 = (En) 是 平稳 序列 , 其 中 Ес, = 0, 且 满足 : 对 于 某 C > 0,a > 0, 有 


N-1N-1 


ўт RU -0D= 广 У в |1 - HES 


k=0 1=0 А-1 


1 


利用 博 雷 尔 - 康泰 利 引 理 证 明 
1х 
> Уу\ 0 (Р-ас.). 
Né ( а.с.) 


4. 假设 & = (Em) 是 随机 变量 序列 , 具有 有 理 谱 密度 


1 [Paa (e7) 
2л Qal] 
其 中 Pa-i(z) = ao +aiz +-+- +а_12"71, 9. (2) = 1 +biz +-+: + bnz”, 而 且 多 项 式 
Qn(z) 的 根 不 在 单位 圆 上 . 

证 明 存 在 这 样 的 白 噪声 = = (ет), т Е Z, 使 序列 (Em) Ж п 维 序列 (Er Emo 
61), EL, = Em 的 分 量 , 而 п 维 序列 (Eh ER п) 满足 方程 组 : 


КО) = (38) 


ё = 6 + еты, i=1,. ,nn—1, 
п-1 


39 
ты = Уьй" + Ватт, (89) 
50 


i-l 
其 中 B1 = ao, В: = а-1— Вы». 


$4. 协 方差 函数 和 谱 密度 的 统计 估计 


1. 协 方差 函数 的 估计 及 其 性 质 平稳 随机 序列 概率 分 布 的 各 种 特征 的 统计 估 
计 问 题 , 出 现在 各 种 不 同 科学 领域 (地 球 物理 学 , 医学 , 经 济 学 等 等 ) 这 一 节 讲述 的 
内 容 , 建立 估计 的 概念 和 方法 以 及 这 里 可 能 出 现 的 困难 . 

这 样 , 设 上 = (En), є Z, 是 广义 平稳 随机 序列 (为 简便 计 , 假设 是 实数 值 序列 )， 
且 有 数学 期 望 Ben = т, 而 其 协 方差 函数 有 如 下 表现 : 


Е(п) = / р en Е(ах). 


5а. БУНИ Hitit +13. 





设 在 对 随机 变量 60,&1,… „мт 值 观测 过 程 中 得 到 (实现 ) zo,z1… ,znN-1. 问 
如 何 根据 观测 结果 建立 (未 知 ) 均值 的 “好 ”估计 ? 
设 


1 N-1 
тл(т) = у У m (1) 
k=0 


ЖА, 由 数学 期 望 的 初等 性 质 , 可 见 该 估计 在 如 下 意义 上 是 数学 期 望 m 的 “好 ” 估 
У: “全 部 实现 zo,… ,zw-1 的 平均 值 ” 是 无 偏 的 , Вр 


1 М-1 
Emx (£) = Е (š у a) =m. (2) 
k=0 
此 外 , 由 83 定理 4 可 见 , 在 
1 N 
—У`ң(к)—0, N оо, 
NÈ 99 
的 条 件 下 , 估计 在 均 方 意义 上 也 是 相合 的 , 即 
Ејтм(6) 一 mm 一 0，N 一 0. (3) 
现在 , Е т = 0 ЖЕТ, 讨论 协 方差 函 教 R(n)、 谱 函数 FA) = Е([-т,^)) 和 
WER SOA) 的 估计 问题 . 
由 于 R(n) = Бє, дек, 则 作为 对 其 根据 N 次 观测 结果 zo,zl,… ,zw-1 的 估计 ， 
自然 假设 对 于 0< ms м 


了 1 М-п-1 
Вм(п, =) = тү У Ти+ктк. 
k=0 





显然 , 估计 在 如 下 意义 上 是 无 偏 的 : 
ЕЙ (п, Е) = R(n), 0<n<N. 


现在 讨论 估计 Вк(п,&) 的 相合 性 问题 . 将 83 № (37) 式 中 的 Er PR Entrén 并 
假设 对 于 每 一 个 整数 n, 序列 C = (Ck)kez, Ck = бк 是 弱 平稳 的 (特别 , 由 此 可 见 
存在 4 И Ес < оо). 因此 条 件 


N-i 
E I веке — (пф ~ RW] — 0, N — оо, w 
k=0 
对 于 
Е|Йх(п,&) – (п)? 0, N > œ (5) 
是 充分 和 必要 的 . 
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假设 原 序列 E= (En) 是 (均值 为 0 和 协 方差 为 Rin) 的 ) 高 斯 序列 , 则 由 于 第 二 
章 812 的 (51) 式 , 有 


了 [En+ktk — R(n)]lénéo — R(n)] = Eéntrérénéo — (п) 
= Кёк EBénéo + Entrén EEEo + Eén+ré0Bérén — R?(n) 
= R?(k) + R(n + К)В(п — k). 
因此 , 对 于 高 斯 情形 , 条 件 (4) 等 价 于 如 下 条 件 : 


N-1 
1 YE [R?(k) + R(n + k)R(n — k)] > 0, N оо. (6) 
к=0 
由 于 |R(n + К) (п — k)| < |R(n + k)|? + [R(n — К), 故 由 条 件 
М-1 
РЗ У (0) 0, N> о, (7) 
k=0 


可 得 到 条 件 (6). 同时 , 若 条 件 (6) 对 于 п = 0 成 立 , 则 条 件 (т) 也 成 立 . 

于 是 , 我 们 证 明了 下 面 的 定理 . 

ЖЕ &&=(&) 是 高 斯 平稳 序列 , 其 均值 为 0, 而 协 方差 函数 为 Rn). 则 条 
# (т) 是 “对 于 任何 nn 之 0, 估计 Ау, 在 均 方 意义 下 是 协 方差 函数 Rn) 的 相合 
估计 ”的 充分 必要 条 件 , 即使 “条 件 (5) 成 立 ” 的 充分 必要 条 件 . 

Ж 如 果 利用 协 方差 函数 的 谱 表 达 式 , 则 得 


1 № л ри Е р п (т 

= УХ Ак) = < У ел F(dA)F (dv) = Ум (А, 0)Е(АА)Е (ао), 
N > ЇЕ 大 N >; Š J 
其 中 (对 照 83 的 (36) 式 ) 


15 А = 2, 
Л) = 10-м 
маар А*” 
但 当 N 一 oo 
1, А=», 
(Ао) = КА, v) = {к Ау, 
从 而 


1 Na nO pr т. 
ту ны - |" [ларь = |" ғор) = УУ РЗ), 
х У е f f to 6 >. 


其 中 由 于 测度 FER, 故 对 和 的 和 式 中 最 多 有 可 数 项 . 
于 是 , 条 件 (7) 与 条 件 
УРА) =0, (8) 


入 
等 价 . 而 这 说 明 谱 函数 FA) = F([-7, 入 ) 是 连续 的 . 
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2. 谱 函 数 和 谐 密度 的 估计 的 求法 “现在 讨论 建立 谱 函 数 FO) 和 谱 密 度 f(A) 
的 估计 问题 (假设 FA) 和 fA) 存在 ). 

ВЖ, 由 赫 尔 格 洛 茨 定理 (第 55 М), 可 以 得 出 建立 谱 密 度 估计 必 经 的 途径 . 回 
忆 在 $1 引进 的 函数 : 


Jw(A) = = У ( 二 м) В(п)е-"^, (о) 


Ini<N 


它 具 有 如 下 性 质 , 由 jw(A) 建立 的 函数 














入 
Ру0) = [ноа 


基本 收敛 于 谱 函数 F(A)， 因 此 , 假如 谱 函 数 F(A) 有 密度 f(A)， 则 对 于 每 个 є 
[-т,т), 有 


入 入 
[now ] f(v)dv. (10) 


由 这 些 事实 , 并 注意 到 Ev(n,z) 是 (根据 观测 值 zo,z1,… омс) 对 R(n) 的 
估计 值 , 用 函数 


ба) = К > ( = м Ям (пу r)en, an 


做 f( 和 ) 的 估计 值 , 其 中 Ry (n; z) = Ём(|п|;т). А 
通常 称 函 数 fA) 为 周期 图 , 并 且 不 难 验证 函数 / (А; =) 也 可 以 表示 为 如 下 
较为 方便 的 形式 : 


2 


1 [м 
Рау = -iàn 
№2) = оуу уме 2 








(12) 
HF ЕЁ (п; 6) = R(n), |n| < №, М 

了 (6) = fn (A). 
如 果 谱 函数 РОА) 有 密度 A), 则 注意 到 fw(A) 可 写成 81 中 (34) 式 的 形式 , 有 


1 М-1М-—1 т 
KA= У У / erUk-DeiMtt- 朋 Jojdu 
N © 75 


k=0 [= 
2 
1 


т 
= у: 2rN 


N-1 


У @i(v—A)k 


k=0 


f(v)dv. 








函数 
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称 做 费 耶 尔 (L. Féjer) 核 . 由 该 函数 的 性 质 知 , 对 于 ( 按 勒 贝 格 测度 ) 几乎 所 有 的 А, 
有 


эх -wr = ло). аз) 

因此 对 于 几乎 所 有 的 Ae |-т,т), 有 
EÎN (A;£) — FA), (14) 
换 句 话说 , 谱 函 密度 f(A) 根据 观测 值 ro,zi,… отно 的 估计 (Ас), ЖЖЖ, 
дае 可 以 认为 估计 fr(A) 是 充分 “好 的 ". 然而 , 周期 图 fy( 和 ;z) 在 


个 别 观测 值 zo,z1,… хм 上 的 值 , 对 真 值 f(A) 的 偏离 往往 是 很 大 的 . 例如, 设 
== (En) 是 独立 平稳 高 斯 随机 变量 序列 , En ~ N(0,1). 那么 fA) = 1/27), 而 


2 


1 М-1 
L F ee . 
ук?“ 





Мо = i 





因此 2n fw (0; 2) 与 高 斯 随机 变量 n ~ N(0,1) 平方 的 同 分 布 . 由 此 可 见 , 对 于 任意 N 
віў (0:0) — ЛОР = 158? 1° > 0. 


此 外 , 经 不 复杂 的 计算 可 以 证 明 , 如 果 (А) 是 移动 平均 平稳 序列 = (En): 
En =} oken-b (15) 
一 0 


的 谱 密度 , 而 且 S lak| < oo [к < оо, ЖФ є = (en) 是 白 噪声 , П Её < оо, 
k=0 =0 
则 
20); A =0, 4r; 
POA) А#0,+т, 
由 此 可 见 , 周期 图 不 能 做 谱 密度 的 满意 的 估计 . 为 矫正 这 种 情况 , 作为 f(A) 的 
估计 常 利 用 形 如 


Jim Е/М) = ЛО)? = { ав) 


Rosa) = f7 Wwa оа ат) 


的 估计 , Л} О; =) 是 由 周期 图 Гу; т) 以 及 称 做 谱 窗 的 “光滑 ”函数 У (А) 建立 
的 估计 . 对 于 函数 Ww(A) 自然 的 要 求 是 : 

а) WNA) 在 点 = 0 的 邻 域内 有 “尖锐 的 ” 极 大 值 ; 

b) JZ, Wn(NdA= 1; 

с) ЕД (Җ%&) – ХР 0, N > оо, ЛЕ [-т,л). 


34. 协 方差 函数 和 谱 密 度 的 统计 估计 a 





由 (14) 式 和 条 件 b) 知 , 估计 FY (А; Е) 是 渐 近 无 偏 的 . 条 件 с) 是 估计 为 均 方 渐 近 相 
合 性 条 件 , 由 上 面 的 讨论 知 周期 图 不 满足 条 件 с). 最 后 , 条 件 а) 保障 给 定 频率 的 
周期 图 的 “尖锐 度 ”. 

下 面 是 形 如 (17) 式 的 估计 的 一 些 例子 . 

巴特 利 特 (M. S. Bartlett) 估计 , 基于 谱 窗 


WN(N) = амВ(ам^) 


的 选择 , 其 中 ам T oo0,an/N 一 0,N > œ, М 











Ф (Е. Parzen) 估计 , 利用 谱 窗 的 函数 
Их (Л) = an P(an\), 


其 中 ак 像 巴 特 利 特 的 情形 一 样 , 而 











茹 尔 边 科 (Журбенко) 估计 利用 形 如 
WN(N) = anZ(anà) 
的 谱 窗 建立 的 , 其 中 
+1 


«+1 а 
“е + 1 рі, 
у= 2а 1А + а № 
0, М>1, 


其 中 0<a< 2, Мал 是 专门 选择 的 量 . 
我 们 不 准备 详细 讨论 谱 密 度 的 估计 问题 , 只 是 指出 , 关于 谱 窗 的 建立 , 以 及 与 其 
相应 的 估计 ЛУ (А; 2) 的 性 质 的 比较 , 存在 大 量 统计 学 文献 . (例如 , 见 [133],[71],[72]). 
3. 谱 函 数 的 估计 “现在 考虑 谱 函数 (和) = Ет, АЈ) 的 估计 问题 . 为 此 , 设 


入 本 Ж 
Вы) = | доб Ра) = ео, 


其 中 Рио; =) 是 根据 (zo,z1,… ,zw-1) 建立 的 周期 图 . 
由 幸 尔 格 洛 茨 定理 (第 55 页 ) 的 证 明 , 可 见 对 于 任意 ne Z, 当 N 一 co 时 


f eindFw(A) > J е" (ал). 
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由 此 (参照 第 三 章 53 定理 1 的 系 ) 可 得 Ру = Р, 即 在 函数 FOA) 的 每 一 个 连续 点 
E, FA) 收敛 于 连续 函数 FOA). 
注意 到 , 对 于 一 切 jn| < N, 有 


Г етае) = Амо (1). 
因此 , 如 果 假设 当 N 一 оо 时 Rynt) 以 概率 1 KAF R(n), 则 
Г. еар; Е) > f е"аР(л) (P - ac)， 


从 而 Ёу(%&) > Р(А) (P - a.c.) 

由 此 容易 得 到 ( 当 证 明 必 要 性 时 , 需要 考虑 其 子 序 列 ), Ёу(п;&) > В(п), 而 也 
Ж Ёу(%&) 5 F. 

4. 练习 题 

1. ® (15) 式 中 的 随机 变量 en ~ N(0,1). 证 明 , 对 于 任何 n БМ N 一 co 时 ,有 


(N -In)DRy(n;é) 一 2" |" (1 + е2") (ах. 
2. 证 明 (16) 式 及 其 如 下 推广 的 正确 性 : 


2f2(0)， 入 =v= 0,+7, 
йт cov (Fy(N;€), 00) = { PO) A=v#0,+n, 
0, А #ъ®. 


35. 沃 尔 德 分 解 


1. 平稳 序列 的 正则 分 量 和 奇异 分 量 下 面 将 要 讨论 的 沃 尔 德 (A. Wold) 分 解 ， 
与 83 的 表达 式 (2) 不 同 : (2) 式 在 频率 范围 内 给 出 了 平稳 序列 的 分 解 , 而 沃 尔 德 分 
解 是 在 时 间 上 的 分 解 . 沃 尔 德 分 解 的 实质 在 于 , 平稳 序列 上 = (&„),п є Z, 可 以 表示 
为 两 个 平稳 子 列 之 和 : 其 中 一 个 可 以 完全 预测 ( 即 它 的 值 完 全 可 以 由 “过 去 ” 的 值 复 
原 ), 而 另 一 个 却 不 可 以 预测 . 

我 们 首先 引进 若干 记号 . 设 Н,„(&) = 1206") 和 H(E) = TE) 相应 为 由 随机 变 
Ж е9 = ( ,&—1,&) MESC ,én_1,n,…) 生成 的 线性 流 形 的 闭 包 . 设 


5(&) = н(е). 


对 于 任意 元 素 ne 五 (6), 以 
Я„(л) = ВоН»(6)) 





55. 沃 尔 德 分 解 79. 





表示 元 素 7 在 子 空间 Н, (6) 上 的 射影 ( 见 第 二 章 511). в 
9007) = Ё[л|5(©)]. 
每 一 个 元 素 7 є Н(), 可 以 表示 为 
n = (1) + [n — 7-оо(т)], 
其 中 7 一 多 。(n) L (п). 因此 , 空间 Н(&) 可 以 表示 为 正 交 和 : 
Н(&) = 5(&) ®В(&), 


其 中 5(&) 由 形 如 分 _wo(m)[m Е НЕ) 的 元 素 构成 , 而 RE) 由 形 如 п-т (1) 的 元 
素 构成 . 

FH, 总 是 假设 Eén = 0, DEn > 0. 这 样 , 空间 HE) 显然 是 非 平凡 的 (包含 非 0 
元 素 ). 

定义 1 平稳 序列 = (En) 称 做 正则 的 , ШЖ 


H(é) = В($), 
而 称 做 奇异 的 , 如 果 
Н(&) = 5(8). 


Жі 奇异 序列 亦 称 为 确定 序列 , 正则 序列 亦 称 为 纯粹 或 完全 非 确定 序列 ， 如 
果 5(6) 是 空间 н(е) 的 特征 空间 , 则 序列 E 称 做 非 确定 序列 . 
定理 1 ”任意 弱 平稳 随机 序列 5 可 以 分 解 为 


En = 6 +6, (1) 


其 中 E= (61) RENES, в E = (65) 是 奇异 序列 . 而 且 № 正 交 (对 于 一 切 
пж т, 15). 
证 明 根据 定义 , 设 


& = ВІ.16(6)), En = En — 6. 


НЯ п, L 506), W SE) 1 S(6)， 另 一 方面 , 因为 SE) С 5(6), 说 明 
SE 退化 (只 含 几乎 必然 为 0 的 随机 变量 ). 从 而 , 过 程 #" 是 正则 的 . 

此 外 , 由 于 Н, (© © Н„(#*)ө Н„(”) В. Hn(€*) C Hn(é), Hn(é") © Hn(é), 可见 
Н»(&) = Н„(©*) Ф Н„(&”), 因而 对 于 任意 n, 有 


5(&) С Н.(6°) Ө Hn(€"). (2) 
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НХ & 1 5(&), 所 以 由 (2) R, 可 见 
S(E) © Hn(é’), 
因而 5(&) © 5(5*) С H(E°). 由 于 总 є 5(&), 可 见 н(е") С 5(6), 从 而 
5(5) = 5(&°) = н(е"), 


这 说 明 序列 E 是 奇异 的 . 

HF 65 є 5(&), МН & 1 5(&), 可 见 显 然 序 列 &7 和 e EX. o 

#2 分 解 (1) 式 中 , 将 序列 分 解 为 正则 分 量 和 奇异 分 量 的 唯一 性 , 见 练习 
题 4. 

2. 沃 尔 德 分 解 

定义 2 E= (En) 是 非 退化 平稳 序列 . 称 随机 序列 є = (en) (对 于 E 为 更 新 
序列 , 如 果 : 

а) < = (en) 由 Een = 0,Е|є„|? = 1 的 两 两 正 交 随机 变量 构成 ; 

b) 对 于 任意 me Z, H,(€) = Н„(є). 

Ж 术语 “更 新 ” 的 含义 与 如 下 联想 有 关 : enp 仿佛 携带 着 HE) 不 包含 的 
新 的 “信息 ”( 或 者 说 , “更 新 ”Hn(#) 中 形成 Н (6) 所 必要 的 信息 ). 

下 面 的 重要 定理 是 前 面 (第 52 页 例 4) 引进 的 , 单 侧 移动 平均 序列 与 正则 序列 
之 间 建 立 联系 . 

定理 2 ”对 于 非 退 化 序列 с 为 正则 序列 的 充分 和 必要 条 件 是 ， 存在 一 更 新 序列 
є = (En) 和 复数 的 序列 (an),n >0, 其 中 È lanl? < oo, 使 


& = Уак (Р-а.с.). (3) 


k=0 
证 明 (1) 必要 性 . 将 Н,(9 表示 为 : 
Н»(&) = Н„-1(&) Ө В». 


由 于 Н„(&) 是 由 Н, _1(6) ФР pen (8 是 复数 ) 的 元 素 组 成 , 可 见 空间 В, 的 维 数 
等 于 1 或 0. 对 于 任何 n, Hal) 都 不 会 与 Н„—1(&) 等 同 . 事实 上 , 假如 对 于 某 个 n, 
В, 是 平凡 的 , 则 由 于 平稳 性 , 对 于 一 切 k, Bk 也 是 平凡 的 , 而 这 表示 HE) = SE), 
然而 这 与 序列 & 的 正则 性 条 件 相 矛 盾 . TE, 空间 B 的 维 数 等 于 1. 
假设 m 是 В, 中 的 非 0 元 素 , 而 
ш 


ва = р. 
"т 


其 中 Imll? = Е > 0. 


35. 沃 尔 德 分 解 “81 





对 于 固定 的 n Mk, 考虑 分 解 : 
Hn(€) = Н„-к(&) Ф В.к. Ф---® Bn- 
那么 , en-k,… ,en 在 Bn_k+1 D O В» 中 构成 规范 正 交 基 , А. 


k-1 


& = 》 ajen- + fn_k(én), (4) 
j=0 





其 中 aj = EBénan-j. 
由 贝 塞 尔 不 等 式 (第 二 章 $11 的 (6) 式 ), 可 见 


о 
У < 1641? < оо. 
j=0 


由 此 可 见 , 级 数 55 wjcn_) 在 均 方 意义 下 收敛 , 而 由 于 (4) 式 , 为 证 明 (3) 式 只 需 证 
j=0 


W: ЭҢ к — со В n-e lEn) 20. 
只 需 证 明 п = 0 的 情形 . ат, = Rillo). 由 于 


к 
Rok =o +Y (R-i —#—+1), 
i=0 


而 和 式 中 的 各 项 正 交 , 故 对 于 任意 六 > 0, 有 


к k 
Уи = 2:8. - #1) 
і=0 i=0 


于 是 , 存在 均 方 极限 lim Rr. 对 于 每 一 个 kk E€ Нк), 故 所 考虑 的 极限 应 属 
于 空间 як. HFEA Бе 及 -k(&), 所 考虑 的 极限 应 属于 子 空间 A = 


5(6). 因为 根据 假设 5(€) 是 退化 的 , 所 以 当 大 一 co 时 ж, Уо. 
(2) 充分 性 . 假设 非 退化 序列 & 可 以 表示 为 (3) 式 的 形式 , 其 中 є = (en) 是 正 交 
Ж (未 必 满 足 条 件 : En(E) = Нє), п Е Z). 那么 , Н„(&) С Н„(є), 因而 对 于 任意 n, 
有 SE) = MHLE) С Hn(e). 由 于 зла 1 Н»(=), Ш № en41 1 5(8), Н ғ = (en) 是 
нє) 的 基 . 由 此 可 见 , 子 空间 5(є) 是 退化 的 , 所 以 序列 Е 是 正则 的 . 口 
#2 ”由 上 面 的 证 明 , 可 见 非 退化 序列 上 是 正则 的 , 当 且 仅 当 它 按照 $1 例 4 (第 
52 页 ) 中 的 定义 ， 可 以 表示 为 单 侧 移动 平均 的 形式 : 


& = Уаш (5) 


k=0 
其 中 E = (En) 是 某 一 正 交 系 . 在 这 种 意义 上 , 由 定理 2 的 论断 可 以 得 到 更 多 的 结果 . 
具体 地 说 , 对 于 正则 序列 є, 存在 这 样 的 数列 а = (an) MERR € = (en), 使 与 (5) 
式 同时 (3) 式 也 成 立 , 且 对 于 (3) < Н,(8) = Hn(e),n Е Z. 


2 
= Ик о < 4lléoll? < оо. 
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由 定理 1 和 定理 2 直接 得 下 面 的 定理 . 
定理 3 ( 沃 尔 德 分 解 ) 如 果 & (En) 是 非 退 化 平稳 序列 , 则 


名 = 总 + Уак, (6) 
大 =0 


其 中 а < oo 而 se 一 (en) (ТС) 是 一 更 新 序列 ， 


з. 外 推 和 预测 “在 讨论 下 面 的 (线性 ) 外 推 问题 时 , 上 面 引进 的 正则 和 奇异 序 
列 的 含义 , 就 显得 特别 清晰 . 利用 沃 尔 德 分 解 (6) 非常 有 助 于 (线性 ) 外 推 问题 的 一 
般 解 . 

В Нобе) = 12020) 是 由 变量 £ = (… ,£1,60) 生成 的 封闭 线性 流 形 . 考虑 根据 
“过 去 的 ”观测 结果 £9 = (… 61,60), 建立 变量 6 的 ( 均 方 ) 最 优 线性 估计 En 的 
问题 . 

由 第 二 章 811, 可 见 | 

&, = Віно). (7) 

( 按 第 1 小 节 的 记号 , En = (én)). 由 于 E 和 E 正 交 且 Но(&) = Но(#") Ф Holé’), 
则 注意 到 (6) 式 , 有 


& = ВЕ + 全 LEo(6)] = Ble Ho(é)] + 可 [ef1Eo(6)] 
= Elés|Ho(é") @ Но(&*)] 十 下 [51Eo(67) Ф Ho(é’)] 


= В Но] + Віно) = 6. +В [> aken-k 
к=0 





ње . 
在 (6) А+, 对 于 = = (en), £" = (&) 是 更 新 序列 , 从 而 Holé") = Hole). 因此 
名 = 名 十 人 (Soe 
k=0 


而 根据 60 = (… E-go) 预测 én 的 均 方 误差 等 于 





њо) = 6+ Уак, (8) 
к=п 


о = Elén – & = Уа. (9) 
к=0 


由 此 可 得 如 下 两 个 重要 结论 : 

а) 如 果 序列 上 是 奇异 的 , 则 对 于 任意 п > 1, (外 推 ) 误差 o2 等 于 0. 换 句 话说 ， 
可 以 根据 “过 去 ”6 = (… ‚&-1,&) 无 误差 地 预测 En. 

b) 如 果 序列 & 是 正则 的 , 则 02 < ой, 而 且 


оо 
И 2 — 2 
їп о, = >; jak| (10) 


$5. 沃 尔 德 分 解 83. 





由 于 2 
Уа? = Elénl?, 
k=0 
则 由 (10) 和 (9) 两 式 可 见 
& и, 0, п оо, 
即 随 n 的 增 大 , 由 = = (… „61, о) 预测 随机 变量 с, 是 平凡 的 (简单 地 就 等 于 
Eén = 0). 
4. 正则 序列 的 充分 和 必要 条 件 ”假设 是 非 退 化 正则 平稳 序列 .根据 定理 2, 
任何 这 样 的 序列 可 以 表示 为 单 侧 移动 平均 的 形式 : 


En = Уба (11) 
k=0 


其 中 > ак]? < оо, 规范 正 交 序 列 є = (en) 具有 如 下 重要 性 质 : 
=0 
Hn(é) = Hn(e), пЕ 2. (12) 


表达 式 (11) 表示 (Ж. 83 第 3 小 节 ), 当 在 物理 可 实现 的 滤波 器 入 口传 递 序列 < = (en) 
时 , Да = (ак), к > 0, 为 脉冲 转移 函数 的 滤波 器 、 在 出 口 的 接收 信和 号 为 ev. 

像 任何 双 侧 移动 平均 一 样 , 正则 序列 具有 谱 密度 (А). 但 是 , 由 正则 序列 可 以 表 
示 为 单 侧 移动 平均 的 情形 , 可 以 得 到 关于 谱 密 度 的 补充 信息 . 


首先 , 显然 i 
О) = 5100), 
其 中 
Ф(А) = Уеа, Уа? < оо. (13) 
k=0 一 | 
设 со 
Ф() = Уак". (14) 
к=0 





该 函数 在 开 区 域 {z : |z| < 1) 是 解析 函数 , 并 且 由 于 条 件 È lan? < оо, 属于 所 谓 哈 
Ж (G. H. Hardy) 函数 类 H?, 即 在 满足 ‹ 


р, 去 Г. 19(те*) |240 < оо. (15) 
的 、 区 域 {z : |z| < 1} 上 的 解析 函数 类 g = g(z). 事实 上 ， 


E 49.2 ИГЕ 
去 / (ге) Рав = У ак" 
29 к=0 
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= © 
sup У 10272 < Уа? < оо. 


osr<1k=0 k=0 


复 变 函 数论 中 证 明 , 恒 不 等 于 0 函数 Ф є H?, -r < 和 < т 0. Ш Bei) 
满足 如 下 性 质 : 
ji їп |Ф(е-#\)|4л > —оо. (16) 


对 于 现在 所 考虑 的 情形 ， 
ДО) = ‚вер, 
ЖФ gce. 因此 
In f(A) = – In 2r + 21n |Ф(е-^\)|, 
从 而 , 正则 过 程 的 谱 密度 S(O) 满足 条 件 


f lnf(A)dA > —оо. (17) 


另 一 方面 , 假设 谱 密度 f(A) 满足 条 件 (17). 仍然 由 复 变 函 数论 的 性 质 , 可 见 在 
哈代 函数 类 Н? 中 , 存在 函数 Ф(2) = È anz", 使 ( 按 勒 贝 格 测度 几乎 处 处 ) 


IO) = Elele. 


因此 ,  Ф(^) = (e-^), 得 
JW = НОР, 
其 中 pA) 是 由 (13) 式 中 的 函数 . ЖА, 由 83 定理 3 系 1 可 见 , 序列 Е 可 以 表示 为 
单 侧 移动 平均 (11) 的 形式 , 其 中 < = (en) 是 某 一 规范 正 交 序列 . 由 此 以 及 第 2 小 节 
注 2, 可 见 序列 上 是 正则 的 . 
于 是 , 我 们 证 明了 下 面 的 定理 . 
定理 4 (RARER) 设 是 非 退 化 正则 平稳 序列 , 则 存在 满足 


Г. In f(A)dà > —оо. (18) 


谱 密 度 SA). 特别 , ( 按 勒 贝 格 测度 几乎 处 处 ) f(A) > 0. 
相反 ,如 果 & 是 某 一 有 谱 密度 且 满 足 条 件 (18) 的 平稳 序列 , 则 该 序列 是 正则 的 . 
5. 练习 题 
1. 证 明 具 有 离散 谱 ( 谱 函 数 FO) 是 阶梯 函数 ) 的 平稳 序列 是 奇异 的 
2. 假设 o2 = ЕЕ, – 2.12.2, = Ё[&„|Но(©)]. WE, 如 果 对 于 某 个 n > 1,02 = 0, 
则 序列 є 是 奇异 的 ; 而 假如 п — 00,02 一 R(0), 则 序列 & 是 正则 的 . 
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3. 证 明 平稳 序列 5 = (En) En ете, 是 正则 的 , 其 中 y 是 在 [0,27] 上 的 均匀 分 
布 随机 变量 . 求 估计 2 和 о? 的 值 . 证 明 非 线性 估计 


- К * 
%= (ё) 
是 根据 “过 去 ”69 = (… ,&-_1,60) 对 с, 的 无 误差 预测 , 即 


Е -él =0, п>1. 


4. 证 明 , 将 є. 分 为 正则 分 量 和 奇异 分 量 的 分 解 (1) 唯一 . 


86. 外 推 、 内 插 和 过 滤 


1. 外 推 ”对 于 夺 措 序列 的 情形 , 由 上 一 节 结果 , 可 以 根据 “过去” E = (… ,1 
Eo), 进行 无 误差 预测 (外 推 ) 随机 变量 Enn > 1, 因此 , 自然 在 讨论 任意 随机 序列 的 
外 推 问题 时 , 首先 研究 正则 序列 的 情形 . 

根据 85 的 定理 2, 任何 正则 序列 & = (En) 都 可 以 表示 为 单 侧 移动 平均 


& = 》 aken-b (1) 


к=0 


的 情形 , 其 中 lakl? < оо,є = (en) 是 某 一 更 新 序列 . 因为 根据 85 的 (8) 式 , 有 
=0 


& = J aken- (2) 
kz 


п-1 
02 = Еј, — Enl? = Уа. (3) 
k=0 


所 以 由 $5 可 见 , RER (1) 解决 求 最 优 (线性 ) 估计 E = Ё(&„|Но(&)) 的 问题 . 不 过 ， 
由 于 如 下 的 原因 , 该 解 只 能 是 原则 性 的 解 . 
通常 所 考虑 的 序列 并 没有 (1) 式 表达 , 而 是 由 其 协 方差 函数 Ra) 或 谱 密度 fA) 
表达 (对 于 正则 序列 (А) FE). 因此 , 只 有 在 系数 ok 通过 R(n) 或 f(A) 值 表示 , 而 
变量 ek 通过 的 … 61,66 值 表示 的 情况 下 , 才 可 以 认为 解 (2) 是 满意 的 . 
我 们 不 涉及 这 一 问题 的 一 般 形式 , 而 局 限于 讨论 一 种 (对 应 用 感 兴趣 的 ) 特殊 情 
形 , 即 谱 密度 表示 为 1 
И) = 5019067), (4) 





的 情形 , 其 中 函数 Ф(2) = E bet 的 收敛 半径 为 > > 1, 而 且 在 区 域 {z : |z| <1} 内 
k=0 
无 0 点 . 
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设 т 
ё = / в" 2(ал) (5) 
是 序列 上 = (Е), пе Z, 的 谱 表示 . 


定理 1 如 果 序 列 & 的 谱 密 度 表示 为 (4), 则 根据 = (са) 对 随机 变 
Фо 的 最 优 (线性 ) 估计 ©, 由 公式 





& = [Г haza © 
ж, 其 中 а 

Фев (7) 
而 


Ф„(г) = Г 


ken 
证 明 根据 83 定理 2 的 注 , 任意 随机 变量 多 є Hol) TURRA: 
= Ф028), $» евр), (8) 
其 中 Ho(F) 是 由 函数 
en = е" (n>0) [ro = J Е лоњ) Е 


生成 的 闭 线性 流 形 . 
由 于 
т 2 т 
ве. -P= 上 / е“ - 00208) = J jen — Bn (A)|? FAAA, 
则 估计 (6) 式 之 最 优 性 的 证 明 归 结 为 证 明 


[emaa лода = le -BN o 


р) 
由 希 尔 伯 特 空间 的 理论 (第 二 章 811) 可 见 , (在 (9) 式 意义 下 的 ) 最 优 函 数 n(A) 
决定 于 如 下 两 个 条 件 : А 


1) Gn(N) є Ho(F); 
2) [е^^" — @„(д)] L Но(Р). 


由 于 


(10) 


ети (e7) = en bpe n + Бле POHD 十] € Ho(F), 
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且 类 似 地 Ф. (e7) є Но(Е), 则 由 (т) 式 定义 的 函数 $, (А) 属于 函数 类 Ho(F). М 
此 , 为 证 明 函 数 Ф, (А) 的 “最 优 性 ”, 只 需 对 于 任意 т > 0, 证 明 


le” — Ф„(д)] 1 eTM, 


即 л 
Inm =f len — Ф, (MJe*™ /(А)4л, m > 0. 
下 面 的 一 系列 等 式 就 证 明 这 一 论断 . 
1 f7 тт Ф (е) - 
Іт = == [е + hi- Se) | |Ф(е-^)?ал 
1 


= 去/ entm (е) Ф, (- ал 


т ml оо 
= 21 еїМт+т) (Ere) (È вым) ал 
2т Jon k=0 1=0 
1 т п-1 оо 
一 iN A(n—k) Бе?“ = 
= 去 / е "(бв = (б Jazo 





= k=0 
其 中 最 后 一 等 式 成 立 , 因为 对 于 任意 m >0 和 7 >1, 有 
/ T PMA = 0, О 


注 1 如 果 将 函数 Pr(A) 展 成 傅 里 叶 级 数 
加 (AM) = Co + Слет + Се +... 


则 根据 “过 去 ” E = (… 6,50), 对 随机 变量 Enn > 1, 的 预测 (外 推 ) &, 决定 于 
如 下 公式 : 
En = Coto+C-iE-1+TC-2E-2 十 … 
#2 有理 函数 


_ 1 |P]? 
FO = zz [Qe 
是 由 (4) 式 表示 的 谱 密度 的 典型 例子 , 其 中 多 项 式 P(z) = ao + az +--+ ара? 和 
Q(z) =1+biz 十 … 十 boz9 在 区 域 {z:|z| < 1} 内 无 0 A. 
事实 上 , 在 这 种 情形 下 只 需 设 #2) = Р(2)/0(2). 那么 











更 (z) = УС, 
大 =0 


而 且 该 级 数 的 收敛 半径 大 于 1. 
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举 两 个 演示 定理 1 的 例子 . 
例 1 设 谱 密度 为 
ДО) = 2-6 + 4соѕ А). 
相应 的 协 方差 函数 Rn) 具有 “三 яя 形状 : 
R(0) =5, В(+1) =2, Е(п) =0(т] > 2). (11) 
由 于 所 考虑 的 谱 密 度 可 以 表示 为 
л) = деер, 
故 可 以 运用 定理 1. 易 见 
e^ = 
ей, Pn 
所 以 对 于 一 切 n > 2,6, = 0, 即 根据 E = (… ‚&-1,&) 对 En 的 (线性 ) 预测 是 平凡 
&. 因为 , 如 果 注 意 到 根据 (11), En(n > 2) 与 &,&-1,---, 中 任意 变量 的 相关 性 为 0， 
则 这 一 点 也 不 奇怪 . 
对 于 n=1, 由 (6) 和 (12) 两 式 , 可 见 


F(A) =е^ (А) = 0(n > 2). (12) 








р, ле 1r 1 
&= [zy о 
те 
оо (тук гт Е 
= >. Сиг [Г 20А) = У е суа 
= z 
26 = м + 
#2 设 协 方差 函数 为 
Е(п) = а", |а| < 1. 
那么 ( 见 第 53 页 例 5) ыр 
м) = 2 расар ie 
即 
ИХ) = ФР, 
其 中 72 > 
ө) = а ов аз, 
к=0 


ШР 2.0) = on, 得 | 
& = 全 oz =". 
换 句 话说 , 为 由 观测 值 go = (pEi £o) 预测 En, 只 需 知道 最 后 一 个 观测 值 6 
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Жз ”由 正则 序列 上 = (En) 的 沃 尔 德 分 解 


En = 》 aken (13) 
大 =0 
可 见 谱 密 度 SO) 可 以 表示 为 
FO) = leleh), 
其 中 
Ф(2) = Уак“. (15) 
k=0 


显然 , 相反 得 命题 也 成 立 : WR f(A) 可 以 由 形 如 (15) 式 的 函数 更 (z) 表示 为 (14) R, 
则 序列 & = (En) 的 沃 尔 德 分 解 具 有 (13) 式 的 形式 . AT, 谱 密度 (А) 形 如 (14) R 
的 表现 问题 , 与 沃 尔 德 分 解 中 求 系数 ok 的 问题 等 价 . 

定理 1 中 关于 函数 Ф(:) 所 作 的 假设 : 对 于 > > 1, 在 区 域 {z : |z| < 1} 内 函数 
Dl) 无 0 点 , 实际 上 并 不 需要 . 换 句 话说 , 如 果 正 则 序列 的 谱 密度 由 形 如 (14) 的 式 
子 表示 , 则 由 E = (… Ego) 建立 的 、 变 量 cn 的 均 方 最 优 估计 由 &, 决定 于 (6) 
和 (7) 两 式 . 

Жа 定理 1 (连同 上 面 的 注 3) 给 出 了 正则 序列 的 预测 问题 的 解 ， 现在 证 明 ， 
事实 上 对 于 任意 平稳 序列 , 有 同样 的 答案 . 确切 地 说 , 设 En = 62 а, 





6 三 emzdN，PC) BAP, FO) = де"), 


其 中 ГО) 是 正则 序列 є" = (&) 的 谱 密 度 . ЖА, 估计 2, 决定 于 (6) 和 (Т) МХ. 
实际 上 (I 85 第 3 小 节 ), 设 





& = f Ф.(А)2(4А), & = Г вое», 
其 中 Zr(A) 是 正则 序列 er 表现 中 的 正 交 随机 测度 . ЖА, 
ве. = [Г e- Фуа) > |" е?" -BaF OA 
> [Г ео" - вором = в BP. a6) 


其 次 , 由 于 ЕЕ, – 2,2 = Е – &Р, TI є, — En =&-&, 故 由 (16) 式 知 可 以 将 
函数 Pnl) % $. (Л). 
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2. РИЙ BR E= (E) 是 谱 密度 为 SO) 的 正则 序列 . 根据 对 6 的 “过 去 " 值 
{был = +1, 2,…} 的 观测 结果 , 建立 ( 均 方 ) 最 优 线性 估计 是 最 简单 的 内 桥 问 题 
以 н(е) 表示 随机 变量 6,(n 0) 生成 的 封闭 线性 流 形 . 那么 , 根据 83 的 定理 

2, 任意 随机 变量 ) є НОО) 可 以 表示 为 : 

n= |" едда, 
其 中 pe H?(F) 是 函数 е?" (п # 0) 生成 的 封闭 线性 流 形 , 而 估计 

&= [| ozan (17) 
是 最 优 的 , 当 且 仅 当 


inf Elgo- n|? = inf / 11 = (A)? F (dà) 


ПЕН") ФЕН°(Е) 
= п - в ЭРРХ = Elo -&Ё. 
由 希 尔 伯 特 空间 НОЕ) P ER HER, 可 见 (对 照 (10) R) 函数 a) 完全 决 
定 于 如 下 两 个 条 件 : 


1) Ф(А) € НО(Е); 
2) 1- $(^) L H?(F). 


定理 2 ( 柯 尔 莫 戈 洛 夫 ) E= (En) 是 谱 密度 为 (和 ) 的 正则 序列 , 且 


(18) 


Г КЕ =0. (19) 
ЖА, 
ФО) =1- TO (20) 
其 中 
EL Е (21) 
-z FOA) 


而 内 播 的 误差 62 = Е|& – Eol? 为 62 = 2ra. 
证 明 证 明 将 在 关于 谱 密度 相当 严格 的 条 件 下 进行 , 假设 


0<c<jJA<cC<oo. (22) 
由 (18) 式 中 的 条 件 2) 可 见 , 对 于 任意 п 0, 有 


fn -ee = о. (23) 
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在 (22) 式 的 条 件 下 , 函数 |1 — ФЛ) 属于 带 勒 贝 格 测度 du 的 、 希 尔 伯 特 空间 
12([-т, т),.2([-т, т), р). 在 此 空间 中 函数 系 


еп 
{5 n =o} 
т 


规范 正 交 基 (第 二 章 {12 的 练习 题 10). 所 以 由 (23) RTA, 函数 |1 — AA) 是 
常数 , 记 作 а. 
这 样 , 由 (18) 式 的 第 二 个 条 件 , 得 


РУОР ЕНЕС 8 
Ф(А) =1 ТО (24) 

现在 根据 (18) 式 的 第 一 个 条 件 , 确定 常数 a. 
由 于 (22) 式 可 见 ,5 e 12 和 ze Н(Р) 与 如 下 的 条 件 等 价 : 2 属于 函数 e(n 7 
0) 生成 的 、( 在 L 中 范 数 的 意义 上 ) 封闭 线性 流 形 . 由 于 在 函数 的 分 解 式 中 零 系数 


应 等 于 0, 故 
et 
o= Фе = 2-а су, 
可 见 常数 a 决定 于 (21) R. 


最 后 ， 
7 ЈО) ат? 


ал = К 
-z POA) Г. dà 








ô? = Е – ёо? = J 1 = ZA) = lal? 


f(A 


于 是 , 在 (22) 式 的 补充 条 件 下 定理 得 证 . 口 
Ж 如 果 


ФА) = У) сек, 


0<IkISN 


&= У а ТШ ейк2(4л) = У) с. 


о<|к|< № А о<|к|< № 
例 3 УА) 是 上 面 例 2 中 的 谱 密度 , 则 通过 简单 的 计算 , 可 得 
= | pte ZAN = pp E tE, 
而 内 插 的 误差 等 于 


2 _ 1—2 
1+ |a|? 
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3. Ш Я (0.5 = ((9n),(&n)),n є Z 是 部 分 观测 序列 , 其 中 Ө = (0,) 是 不 被 
观测 的 分 量 , 而 & = (En) 是 被 观测 的 分 量 . 假设 9 和 Е 是 均值 为 0 的 ( 弱 ) 平稳 序 
列 , 而 





в, = | Za), в, = [Г еол) 
相应 为 0 和 的 谱 表示 . 记 
БА) = ВА), Fe(A) = 12444), 


而 
Foe(A) = EZo(A)Ze(A). 


此 外 , 设 9 和 & 是 平稳 相 联 系 的 , 即 其 协 方差 函数 cov (On, Em) = E06nEm 只 依赖 于 差 
n—m, 记 Roe(n) = Ebnéo, 则 


Вөє(т) -f е" Foe (аА). 


所 讨论 的 过 滤 问 题 , 在 于 根据 对 & 各 种 不 同 的 观测 结果 , 建立 变量 b 的 均 方 最 
优 线性 估计 б,. 

如 果 假设 是 按 cn,m є Z 的 所 有 值 , 建立 变量 bn 的 估计 On, 则 问题 的 解 就 特别 
简单 . 事实 上 , 由 于 б„ = В(б„|Н(©)), 则 存在 这 样 的 函数 Ф (А), 使 


8, = [| е0). (25) 
如 同 第 1.2 小 节 , “最 优 "函数 Ф, (А) 应 该 满足 的 条 件 如 下 : 
1) n(A) (КО 
2) (0n б,) 1 н(е). 
由 最 后 一 个 条 件 , 可 见 对 于 任意 m e Z, 有 
Г оета) - | есета ree) = о. (26) 
因此 , 如 果 假 设 函数 Р, (А) 和 Fe(^) 有 密度 jae(A) 和 天 (A), 则 由 (26) 式 得 
оек) -AAA = 0. 
如 果 ( 按 勒 贝 格 测度 几乎 处 处 ) (А) > 0, 则 由 此 立即 得 
Pa) = 90), (т) 


其 中 
ФА) = Лк О) x /2 (А), 
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而 ЈО (А) 是 ХО) 的 “广义 道 ", 即 
eny | МХ, А > 0， 
Б | КО) = о. 
这 时 , 过 滤 误 差 
Е, – ôn? = / IA) — Ее). (28) 
不 难 验证 2, є Н(Е), 从 而 估计 (25) 式 是 最 优 的 , 其 中 函数 PA) 决定 于 
(27) 式 . 


$4 从 受到 噪声 干扰 信号 中 提取 信号 . Во = bn + п, 其 中 信号 6 = (bn) 和 
噪声 n = (па) 是 不 相关 序列 , 其 谱 密度 相应 为 fol) 是 (А). 那么 


a-f Т eong(N) zelda), 
其 中 
PO) = во + ОР, 
而 过 滤 误 差 | 
кб, = nl? = f OONO + PAPAA. 


现在 可 以 将 上 面 得 到 的 解 (25) R, 用 来 由 观测 结果 Elk < п) 建立 变量 bn+m 
的 最 优 估计 0,6, 其 中 т 是 Z 中 某 给 定 的 数 . 假设 5 = (En) 是 正则 序列 , 其 谱 密 
度 为 


ЛО) = Деса), ЖФ Ble) = Уаз, 
大 =0 


根据 沃 尔 德 分 解 3 
En = Daken-k, 


其 中 е = (en) 是 白 噪声 , 其 谱 分 解 为 a 
== ez 
因为 
бу = 0,1900) = В {Ên iml (ОН, ©} = Bml Hee), 


К 5 
Brim = {pee Nad) = У анте, 
i 


大 = 一 co 
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则 
Onim = В | у 2н) ， 
大 一 一 oo 


其 中 к 
ак = 5 ] ек) Фет). (29) 


由 于 Hn(€) = Н, (е), 可 见 


Brim = Уак | [> мее 244% 


кєп к<п 


Е f в" |ба. Ф®(е—#^)2, (ал), 
Б 1=0 
Ж Ф® 是 Ф 的 广义 逆 . 

于 是 , 我 们 证 明了 如 下 定理 . 

定理 3 ”如 果 被 观测 的 5 = (En) 是 正则 序列 , 则 由 观测 结果 Elk < n) 对 变量 
Onim ( 均 方 意义 下 ) 的 最 优 线性 估计 бл, 由 下 面 的 公式 表示 : 


Brim = {elle уча», (зо) 

其 中 ` 
Ни(е-^) = у ауе pee), (31) 

1=0 


而 系数 ak 决定 于 (29) R. 

4. 练习 题 

1. 在 定理 1 中 , 去 掉 假 设 : 级 数 Dl) 的 收敛 半径 为 + > 1, 而 且 Ф(2) ERR 
{2:21 <1} 内 无 0 A, 并 且 证 明定 理 1 仍然 成 立 . 

2. 证 明 , 对 于 正则 过 程 , (4) 式 中 的 函数 和 (z) 可 以 表示 为 


oo 
Ф(2) = Уо а а), 121 < 1, 


k=l 





其 中 я 
ck = 去 f Е е? ln f(A)dA. 


由 此 导出 一 步 的 预测 误差 o? = ЕЕ — &1|?, 由 塞 格 一 ЖАХ Ж (С. Szegö - А. 


Н. Колмогоров) 公式 


= зер. f hiwa] 
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给 出 . 
3. 不 要 求 条 件 (22) 成 立 , 证 明定 理 2. 
4. 设 不 相关 信号 Ө 和 噪声 n 的 谱 密度 分 别 为 ; 





1 1 1 1 
А = = я 
PA= зт х еар POS 3 х rep 


基于 定理 3, 根据 clk < п) 的 值 求 量 Onim 的 估计 4m, 其 中 Ek = б +. 对 于 
谱 密度 | 5 

ВО) = EPP (А) = 5, 
讨论 同一 问题 . 


87. PRE — 布 西 滤波 器 及 其 推广 


1. FRS - 布 西 概 型 , 卡尔 曼 - 布 西 滤波 器 ”从 计算 的 角度 ,上面 给 出 的 由 对 
的 观测 , 求解 非 观测 分 量 9 的 过 滤 问 题 并 不 适宜 , 因为 既然 用 谱 的 语言 表述 , 它 对 
于 自己 的 实现 就 要 求 进行 类 似 的 处 理 . 在 卡尔 曼 - 布 西 (R. Е. Kalman-R. $. Вису) 
提出 的 概 型 中 , 最 优 滤波 器 的 综合 是 用 递 推 的 方法 实现 的 ,从 而 可 能 借助 数字 计算 
设备 来 实现 . 决定 卡尔 曼 - 布 西 滤波 器 的 广泛 应 用 还 有 其 他 原因 . 在 不 假设 (9,&) 是 
平稳 序列 的 情况 下 , FRE - 布 西 滤波 器 仍然 能 “运用 ”就 是 其 有 广泛 应 用 的 原因 
之 一 

我 们 在 下 面 不 仅 讨论 传统 的 卡尔 曼 - 布 西 概 型 , 而 且 也 研究 其 推广 : 决定 (0,6) 
的 递 推 方程 中 系数 可 能 依赖 于 全 部 以 往 观 测 数据 的 情形 . 

这 样 , 假设 (9,€) = ((6n), (&„)) 是 部 分 可 观测 序列 , 并 且 


On = (P(n), -+ ‚вк(п)), & = (&(п),--- ,&(п)) 
满足 递 推 方程 


On+1 = ао(п,&) + a1(n, €)0n + bi(n,é)ei(n + 1) +5 (п, &)=2(п +1), 
En+1 = Ао(п, €) + А. (п, €)0n + Bi(n, 5) (п + 1) + Bz(n,é)e2(n + 1), 


其 中 e(n) = (en(n),… eln) ealn) = (еж (п),--- ealn) 是 具有 独立 分 量 的 
相互 独立 的 高 斯 向 量 ,并 且 每 一 个 分 量 服从 参数 0 和 1 的 高 斯 分 布 ， ao(n,€) = 
(ao1(n,€),… ,aok(n,€)) 和 Ao(n,é€) = (Aoi(n,€),… , Aoi(n,é)) 是 向 量 函数 , 而 且 这 
些 向 量 函数 与 & = (&0,61,…) 的 独立 性 是 “不 超前 的 ”, 也 就 是 说 , 对 于 任意 固定 的 
n,ao1(n,€),… , An(n, £), 仅 依赖 于 6o,… ,En . 矩阵 函数 

biln, 6) = 160) (mn, ON 52(n,€) = 1000, 6), 

В. (п, 5) = 18020,6), Ba(n,é) = [В (n, 5), 

a(n, £) = 180) (n, ON, Акт, 9 =149 (n, 8) 


(1) 
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的 阶 数 相应 地 为 x 上 ,kk x ,1 xk, lxl,kx k,l x 上 ,并 且 亦 “不 超前 ” 地 依赖 于 £ 此 
外 , 假设 向 量 (00, 50) 不 依赖 于 序列 є = (se1(n)) 和 sz = (e2(n)). 

为 叙述 简便 , 以 下 将 省 略 “ 系 数 不 依 赖 于 г KER. 

为 使 方程 组 (1) 有 解 , 假设 


к 
Е(|%|? + 1012) < оо, (е =} аф = (ш, ғә) ў 
= 


0 (п,&)| < С, А0 (n, £) < С, 而 且 如 果 g(n,e) Ж aoi, Ад, Б.Б, ВО), ВО 任意 
函数 , W Е|9(п, 5) [2 < со, п = 1,2,…. 在 这 些 条 件 下 , 对 于 序列 (0, £) 满足 Е(|0.12- 
上 en?) < œn >1. 

其 次 , Ж 9 = о{ш: 60,… En) 是 随机 变量 66,… ,En 生成 的 最 小 о 代数 ， 
并 且 

mn = EnF $), л 一 卫 [(gn 一 man)(gn = тн). 

根据 第 二 章 88 定理 т, = (mi(n),… ,mx(n)) 是 向 量 0n = (91(n),… ,9k(n)) 的 
均 方 最 优 估计 量 , 而 Ел, = Е[(0. — mn)(0 - т„)°] 是 估计 误差 矩阵 ， 对 于 由 方程 
(1) 决定 的 任意 序列 (0,6), 求 这 些 变量 是 相当 困难 的 课题 . 不 过 , 在 如 下 关于 (60, &0) 
一 个 补充 条 件 下 , 就 可 以 导出 т, 和 о, 递 推 方程 组 , 其 中 包含 所 谓 卡尔 要 一 布 西 
滤波 方程 . 关于 (00,60) 的 这 个 补充 假设 是 : 条 件 分 布 P{bo < або} 是 参数 为 高 斯 分 
布 





1 ap 
Ра < algo} = 人 е а, @) 


其 中 то = то(60), 70 = то(&) 是 分 布 参数 . 

首先 证 明 一 个 辅助 命题 . 

3181 在 上 面 引进 的 关于 系数 方程 组 (1) 和 条 件 (2) 补充 假设 下 , ЛЯ (0,5) 
服从 条 件 高 斯 分 布 , 即 条 件 分 布 函数 

Pfbo < ao ,On < anl 1} 

以 概率 п 维 高 斯 向 量 的 分 布 函数 , 其 分 布 的 均值 和 协 方差 矩阵 都 依赖 于 5，…， 
En. 

证 明 我 们 仅 限于 证 明 分 布 P{0。< anl FE) 的 高 斯 性 , 因此 只 需 导出 т, 和 


mn 的 方程 . 
首先 注意 到 , 由 (1) 式 可 见 条 件 分 布 


P{Onti < a Enyi < |F $, On = b} 


是 高 斯 的 , 其 均值 向 量 为 


ао + аль 
+А:6 = ' 
ым үн + | 
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5a ( bob boB ) , 
Фо)" (ВоВ) 
HH БоБ = bibi + 5263, Бо B = bi B} + b2B3, ВоВ = В.В; + B2B}. 
10 Cn = (Onr En) 和 上 = (ti, вы), 则 
Е[ехр{й* Car HF $, 0n] 
= exp {лит £) + Ai(n,é)0n] 一 В, ©} Я (3) 
现在 , 假设 对 于 某 各 п > 0, 引 理 的 结论 成 立 . WA, 
Elexp{it* Ал(п,&)б„}|# $] 
= exp {ir Aim Em = Аъ зате). a 


证 明 当 将 n 换 成 n+1 时 (4) 式 仍然 成 立 . 
由 (3) RA (4) R, 有 


Eļexp{it" n1 }F $] 
= exp {it [oÇ €) + A(n, Emn] — В, рец АЕ} 
Ый, ЖЖ 





而 方差 矩阵 为 


Р {биз < a, Ensa © IF $) (5) 
是 高 斯 的 . 
像 证 明正 态 相关 性 定理 (第 二 章 813 定理 2) 时 一 样 , 验证 存在 矩阵 С, 使 向 量 


т = [ба = Е (в, – Clénti — Е(&+а}#З)) 
以 概率 1 具有 性 质 : 
E {дель — Bennl ENIF $} = 0. 


由 此 可 见 , 在 Zs 的 条 件 下 , 条 件 高 斯 向 量 ЯП 如 +1 相互 独立 , 即 对 于 任意 A E 
. 罗 (Re) 和 В с .#(В!), 以 概率 1, 有 


P{n € А,&+ Е BIF $} = P{n € AIF $} x Р{&һ+ Е BIF $}. 
因此 , 对 于 任意 s = (s1,… , sk), 有 
Elexp(is"bn+l7 f бы] 
= E (ек (is [86,179 +7 Сона —Е( ы) [F$ En} 
= exp (аз [В +С ~ Вен] Elexplis DITS, Ent] 
= exp ів" [Е(б%„ы Н) + С + – Вы] } Elexplis mF $] (© 
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| 根据 (5) А, 条 件 分 布 函数 Pin < Ире. 这 连同 (6) 式 , 就 证 明了 条 


件 分 布 P{9n41 За} 也 是 高 斯 的 . о 
定理 1 ЖОБ 是 满足 (1) ХА (2) 式 的 部 分 观测 序列 . ЖА, (та, Yn) 服从 
下 列 递 推 方程 : 
тыфу = [ao + ата) 
+0 В + алъ А [ВоВ + А.А] [+1 — Ао — Азта], (7) 
тт = [атла + о] 
ьо В + а%А ВоВ + Ауу Ао B + аА)". (8) 
证 明 由 (1) 式 ,有 
Е (9,4119) = ao + ать, Е(6,+12 $) = Ao + Аат» (9) 
和 
бил — (9.41 $) = a1 (8n 一 mn) 二 bsitna 二 1)+bosz0z+D， по) 
641 — (6151124) = А1(б„ — Mn) + Biei(n + 1) + B2e2(n + 1). 
引进 记号 : 
ап = соу(9л+1,1+119 <) 
= B{l0n+1 — Elni F $) Ona 一 Enl FIF), 
di2 = соч (быть Ens F $) 
= Ef{lon+1 — Eln F $) Enti -Elin F ENIFA 
daa = cov(£n+1, Enl F $) 
= Effens ~ ElEn lF + — Вен}. 
那么 , 由 (10) 式 , 得 
411 = атаа +606, 412 = ајуһАү +60 В, dz = АА + ВоВ. (11) 


由 正 态 相关 定理 ( 见 第 二 章 813 定理 2 和 练习 题 4), 有 
талл = Вена) = Е(Өл4119 5) + 20911 — Eléri lF A) 


лаза = cov (bnti, nrl f ént1) = фи — 424% 4}. 


将 (9) А (0,4175) 和 Е (6,415), RAEE mri 的 表达 式 , 将 (11) 式 中 
的 didiz, doz, 代入 上 面 ni: 的 表达 式 , 即 可 得 到 欲 证 明 的 递 推 方程 (7) 和 (8). О 
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ЖІ 如 果 在 方程 组 (1) Ф, MARA ао(п, 5), --, Во(п,6) Ж E 则 相 
应 的 概 型 称 做 卡尔 曼 - 布 西 概 型 , 而 关于 т, 和 Yn 的 方程 (7) 和 (8) 称 做 卡尔 要 - 
AARRE. 需要 强调 , 在 这 种 情况 下 , 条 件 误差 矩阵 m 的 等 于 无 条 件 和 矩阵 ,， 即 


т = Ern = Е[(#„ 一 min)(gn — т„)°]. 


Ж 2 假设 对 于 部 分 观测 序列 (On En), 0, 满足 (1) 式 的 第 一 个 方程 , 而 En 满足 
方程: 


En = Ао(п —1,&) +А (п – 1,00, 


Ж 25 (12) 
+В! (п – 1, 8) (п) + В2(п — 1,6) (п). 
那么 , 显然 
Ent1 = Ao(n,€) + Аз(п,&)[ао(л,&) + a(n,é)0n + bi(n,é)a(n +1) 
+ ba(n,é)ea(n + 1)] + Bi (n, €)ei(n + 1) + Bo(n,é)e2(n + 1). 
ЕА 
Ао = Ао+ Дао, А, = Аза, 
В; = АЫ + Ву, В = Аз + В», 
则 所 考虑 的 情形 也 属于 概 型 (1), 而 且 mn 和 Yn 满足 方程 (7) 和 (8). 
2. 最 优 线性 浅 波 器 的 结构 ”现在 考虑 线性 概 型 (对 照 (1) 式 ) 
On+1 = ao 十 algn + a2én + bie1(n + 1) + 62=2(п + 1), аз) 


En+1 = Ао + А0, + Азё + Вє(п + 1) + B2e2(n +1), 


其 中 所 有 系数 ao,… , Во 可 能 依赖 于 n (但 不 依赖 于 ©), 而 且 є, (п) Ж Eeij(n) =0 
和 Бе? (п) = 1 的 独立 高 斯 随机 变量 . 

假设 方程 组 (13) 在 初始 条 件 (90,&0) FRE, 而 且 条 件 分 布 P{9o。 < alio} 是 参 
数 为 то = 了 (bolso) 和 yo = соу(#о, 00180) = Eyo 的 高 斯 分 布 . WA, 由 于 正 态 相关 定 
理 以 及 (7) 和 (8) R, т, = Е(8„|#) 的 最 优 估计 量 是 60,&1,… ,én 的 线性 函数 . 

由 以 上 讨论 的 结果 , 在 不 要 求 高 斯 性 的 情形 下 , 可 以 证 明 关于 “线性 滤波 器 结 
构 ” 的 如 下 重要 论断 . 

定理 2 Я (0,5 = (On,En)n>0 是 满足 方程 组 (13) 的 部 分 被 观测 序列 ， 其 中 
eij(n) 是 不 相关 随机 变量 , В. Ес, (п) = 0 f Ee? (n) = 1, 而 初 值 向 量 (00,60) 的 分 量 
具有 有 限 二 阶 矩 . 那么 ,mn = EnF E) ИНН, = 包 (0n|é0,61,… ,én) 
满足 方程 (7), 其 中 


ао(п, &) = ао(п) + a2(n)én, Aoln, £) = Ао(п) + Az(n)én, 
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ARAE 7 = БӨ, — й,) (6, — й,)"| 决定 于 方程 (8), 其 初始 条 件 为 


о = соу(6о, &)соу® (ёо, &о)$о, 
Fo = соу(Өо, до) — cov (80, Eo)cov® (Eo, а)соу* (о, ёо). 


(м) 


定理 的 证 明 需要 下 面 的 引 理 . 在 建立 最 优 线性 估计 时 , 引 理 说 明 高 斯 性 作用 . 
3182 И (2,0) 是 二 维 随机 向 量 , L Elo? + 7) < оо, 而 (0,8) Ж5 (0,8) 


具有 相同 一 阶 和 二 阶 矩 的 二 维 高 斯 向 量 , 即 
Ей = Ea', ЕЙ = Ef, i=1,2, Eaf = Eap. 
Жл) 是 的 线性 函数 且 
A(b) = Е(а18 = b). 
ЖА, М8) 是 由 有 日 对 a 的 均 方 最 优 线性 估计 ， 即 
Ё(а|8) = А). 


这 时 EA(8) = Еа. 
证 明 首先 注意 到 , 由 正 态 相关 定理 , 可 见 存在 线性 函数 Ab): AO) 
5). 其 次 , 假设 X(5) 是 另外 一 个 线性 估计 , 那么 


Е - (6)? > Eà – MB)]2， 
而 由 于 估计 量 X(b) 和 A(O) 线性 的 , 以 及 由 引 理 的 条 件 , 有 
Еа – В)? = Еа - ХВ)? > Еа - ХВ) = Ela – ХВ), 
于 是 , 证 明了 AO) 在 线性 估计 类 中 的 最 优 性 . 最 后 得 
Ед(8) = ЕХ(В) = Е[Е(а\й)) = Еа = Ев. 
证 明定 理 2 与 方程 组 (13) 同时 , 考虑 方程 组 : 


On+1 = ао + а1б„ + а2ё + МЕ (п + 1) + әЁ12(п +1), 
ёл = Ао + А10. + Azén + Виз (п + 1) + B2222(n + 1), 


= Е(аВ = 


(15) 


其 中 5, (п) 是 独立 高 斯 随机 变量 , EEij(n) = 0 和 E2 (п) = 1. 假设 (Oo, Eo) 是 高 斯 
随机 向 量 , 有 与 (bo, 6o) 相 同 的 一 阶 矩 和 协 方差 , 而 且 不 依赖 于 Eyl). ЖА, 由 于 方 
程 组 (15) 是 线性 的 , 向 量 (бо, … ,所 ,60,… ,&„) 是 高 斯 的 , 即 由 引 理 2 (确切 一 点 说 ， 


由 定理 2 的 明显 的 类 似 ), 以 及 正 态 相关 定理 , 可 以 得 到 定理 2 的 结论 . 


口 
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3. 例 下 面 是 应 用 定理 1 和 定理 2 的 例子 . 
例 1 设 9= (0,) п = (т) 是 两 个 ( 弱 ) 平稳 不 相关 随机 序列 , Еб, = 了 mn = 
0, 而 其 谱 密度 相应 为 
1 1 1 
0) = этге т №) = трети, 





其 中 |Ы < 1, Jb] < 1. 
下 面 将 把 9 视 为 有 用 信号 , 而 n 视 为 骂 声 ,并且 假设 对 序列 E= (En) 进行 观测 : 
én = On +. 
根据 83 定理 3 的 系 2, 存在 ( 互 不 相关 的 ) 白 噪声 e1 = (єз(п)) 和 єз = (е2(п)), 使 
Өл + 010, = e(n + 1), та + 621 = =2(п + 1). 
ЖА, 
En+1 = Ont1 + ть = - в — бот + є(п + 1) + =2(п + 1) 
= 52 (6. + т) — On(bi — b2) + (п + 1) + =2(п + 1) 
= 65. – (bı - b2)ðn +=1(п +1) +e2(n +1). 
这 样 , 对 于 9 ЖЕ 有 递 推 公式 
Ont+1 = 一 bgn 十 cl( +1), 
En+1 = —(b1 — b2)0n — bzén + Ei(n + 1) + (п + 1). 


По, т, = В(0 |60,51,:--,6.) 和 了 = BOn — №.) 满足 如 下 最 优 线性 滤 
波 器 的 递 推 方程 组 : 


(16) 


E enpi + (bi — ba)mn + babal, 


23а _ В+ - 62) 
ты = ёа tl- Е by OTE A 


现在 求 为 解 该 方程 组 所 需要 的 初始 条 件 то 和 yo. 记 dı = E0}, 412 = EOnén,， 
dn = Е, 那么 由 (16) R, 可 见 
dn = Вац +1, 
412 = bı(bı — 52) 411 + 6162412 + 1, 
аљ = (bı — b2)?d11 + 68452 + 265 (1 — b2)dı2 + 2, 


тан = —bimn + 
(17) 


因此 ， 
2-0-6 


1 1 
а = ты’ 412 = =’ 42 = п 0-8 
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从 而 , 由 (14) 式 得 如 下 初始 数据 的 值 : 





т = 2 

a гә Т 
Е Ф 1 1-8 r. 1 as) 
1020174 ты O-o-o) 2-67-03 


这 样 , 由 60,61,… , 对 信号 On 的 最 优 ( 均 方 ) 线性 估计 т, 和 均 方 误差 m 
决定 于 递 推 方程 组 (17), 并 且 对 于 初始 条 件 (18) 求解 ， 需 要 指出 , ?n 的 方程 不 含 
随机 分 量 , 从 而 , R m 的 数值 所 必须 的 a 的 值 可 以 事先 (在 解 该 滤波 之 前 ) 计算 
出 来 . 

例 2 ”这 个 例子 从 下 面 的 角度 可 以 借鉴 : 它 说 明定 理 2 的 结果 , 在 序列 (0,5) 服 
从 不 同 于 方程 组 (13) 的 ( 非 线性 ) 方程 组 时 , 如 何 用 于 寻找 最 优 线性 滤波 器 的 问题 . 

Ж є = (ei(n)) 和 ez = (ea(m)) 是 两 个 独立 高 斯 随机 序列 , 由 独立 随机 变量 构 
成 , H Eei(n) = 0,Ee?(n) = 1,п > 1. 考虑 随机 序列 偶 (9,&) = (0n,én),n > 0, 其 中 


On+1 = аб„ + (1+ Өб„)еу(п + 1), 
Ent1 = Abn + =2(п + 1). 


假设 bo 不 依赖 于 (stez), H 60 ~ N(mo, то). 
方程 组 (19) 是 非 线性 的 , 故 不 能 直接 运用 定理 2. 然而 , 如 果 设 


(19) 


&(п+1) = =1(п + 1), 


1+6. 
VEC + 6„)? 
ДЯ А ЕР. (п) = 0, ЕЁ (п), (т) = 0(т # п), ЕЁ (п) = 1. 所 以 与 (19) RER, BUF 
列 (0,6) 也 满足 线性 方程 组 


б 一 albn 十 (пт + 1), 
ё = Ав» + e2(n + 1), 


其 中 & (п) = VEU 0,,)2, № {21 (п)} 是 某 一 两 两 不 相关 随机 变量 序列 . 

方程 组 (20) 是 形 如 (13) 的 线性 方程 组 , 即 根据 定理 2, 最 优 线性 估计 量 你, = 
Е(0,150,1,::-,6.) 及 其 误差 ? 可 以 由 方程 组 (7), (8) RE, 在 这 种 情形 下 方程 组 
(7), (8) 有 如 下 形式 : 


(20) 





~ а А\®, = 
Таъл = AMn + ГРА Enyi 一 Аи], 
р = а Аһ 

Злы = [019 + М(п)]— сга, 


其 中 (п) = - JEU Foy 应 由 方程 组 (19) 的 第 一 个 方程 来 求 . 
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例 3 参数 估计 设 9 = (01,… ,9k) 是 高 斯 向 量 , E Eo = т 和 соч (6,6) = 7 
假设 = (én),n > 0, 是 L 维 随 机 序列 , В. 


+ = Ао(п,&) + Ai(n, 5)0 + Bi(n, é)ei(n+1), 6 = 0, (21) 
ДФ а: 的 含义 与 方程 组 (1) 中 的 含义 相同 . 现在 对 于 已 知 的 m 和 y, 欲 根据 对 & 的 
观测 结果 , 求 9 的 最 优 估计 . 


ЖА, 对 于 mn = EF E) 和 y, 由 (7), (8) 式 ,有 


тая = Mn + YA; (n, E(B1BI)(n, £) + А (п, ль Ат(п,&)]® 


x[én+1 — Ао(п, 6) — Ai(n, €)mn]), 


(22) 
аа = Yn — Ап, E(B1BI)(n, £) + А (п, 6) А1 (п, £)]® A1 (п, ть. 
WR В.В: 是 非 退化 矩阵 , 则 方程 组 (22) 的 解 为 
n -1 
то = Б +}, дворда х 
i=0 
|» +7) Aili, E)(B1B) 10,0) — Alm, o] , (23) 
4=0 


де -1 
тн = |e + ranom eomte] т, 
i=0 
其 中 E ЖЖ ШЕШ. 
4. 练习 题 
1. 证 明 , 对 于 概 型 (1), 向 量 ms 和 bu ma 不 相关 : 


Ет (On — т) =0. 


2. 设 概 型 (1) 中 的 Yo 和 所 有 系数 (或 许 除 系数 ao(n,&), Ао(п, £) 外 ) 都 与 “随机 
性 ” 无关 ( 即 不 依赖 于 6). 证 明 条 件 协 方差 n 也 与 “随机 性 ” ЖЖ: 7n = Ey. 
3. 证 明 方程 组 (22) WAHAR (23) жт. 


4. ® (6,6) = (On, En) 是 高 斯 序列 , 满足 概 型 (1) 的 如 下 特别 形式 : 


быа = agn 十 bcltn 十 1)， ё = Abn + Bez(n+1). 


TEM, 如 果 А у 0,6 у 0, В у 0, 则 极限 过 波 误 差 7 = lim q FE, 且 为 方程 
21] 12 2 


的 正 根 . 
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5. (#48; [41,13.3]). (0,5) 是 部 分 可 观测 序列 , 且 服 从 递 推 关系 式 (1) 和 (2). 
设 向 量 gw 的 条 件 分 布 


та(т,т) = Р(0„ < al F$} 


RESH. 
(а) 证 明 , 对 于 n > т, 条 件 分 布 


Talm, n) = Р{9 < а|# $} 


也 是 正 态 的 , ло(т, п) ~ N(u(m, n), (ть т). 
(b) 求 随机 变量 bm (关于 FE) 的 内 插 估 计 p(m,n), RERE у(т, п). 
6. (外 推 ; [41,13.4]). 设 关系 式 (1) 和 (2) 中 的 变量 为 : 


ао(п.&) = ао(п) + a2(n)én, ai(n,£) = a1(n), 
Ао(п,&) = Ао(п) + A2(n)én, Аз(п,&) = Ацп). 


(а) 证 明 , 在 这 种 情形 下 (п > т), 分 布 ros(m,n) = P{0m < а,&„ < bF E) Ж 
ESH. 
(b) 求 外 推 估计 量 
Elm Fh) 和 Ее +). 


7. (最 优 控制 ; [41,14.3]). 考虑 “被 控制 ”部 分 观测 系统 (On, Enoce, 其 中 


On+1 = чп + On + bei(n + 1), 
ént1 = On + e2(n + 1). 


ш, “控制 ” wn 为 FE- 可 测 , 并 且 对 于 一 切 0 < n < N 一 1,Bu? < оо. 随机 变 
Ж =! (п) 和 e2(n),n = 1,… ,NN 的 含义 与 方程 组 (1) REA (2) 相同 ; 6o = 0,0% ~ 
М(т, 7). 

我 们 称 “控制 " u* = (wi,… цу) 是 最 优 的 , 如 果 


м-1 
У(и*) =зарУ(и), ЖФ V(u) = Е ЭС +u) + к] . 
要 n=0 
证 明 : 
up = -(1+ Р] Рыта, п=0,...,М-Ь 
其 中 


i a`, a#0, 
0, а=0; 
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В (Р„)о<п<м 决定 于 如 下 递 推 关系 式 : 
Pa =1+Р,+1 — Pinllt+Prlt, Ру =l, 
而 (т) 决定 于 关系 式 
mapi = Un HAHA) Ea – тд), 0<п</-1, 
其 中 mi =m, йл} = 7, 


ma = +1 - (14) 01 +1), OS<ngN-l. 
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51. 鞍 和 相关 概念 的 定义 (110) 


1. 这 一 节 的 研究 对 象 一 一 X (110) 
2. Ж (ЕЮ) 的 概念 @ (110) 

з. 马尔 可 夫 时 间 (111) 

4. ЖЗ (113) 

5. МУЖЕ ЧИ” WE (115) 
6. Ж – 2 (116) 

7. FÆ (ЕЮ) 的 构造 (117) 

8. БОВЕ ҖЕРЕ (119) 

9. 练习 题 (119) 


$2. 在 时 间 变 量 为 随机 时 间 时 鞭 性 的 不 变性 (120) 


1. 杜 布 定 理 (120) 

2. 杜 布 定理 的 特例 (123) 

з. 基本 瓦尔 德 恒等式 (124) 
4. 更 新 理论 的 基本 定理 (129) 
5. 练习 题 (130) 


$3. 一 些 基本 不 等 式 (132) 


1. 概率 的 最 大 不 等 式 和 LP 中 的 最 大 不 等 式 (132) 
ОЖ “全 国 科 学 技术 名 词 审 定 委 员 会 ”审定 公布 定名 : submartingale № “РР. 
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84. 


$5. 


86. 


87. 


58. 


2. 最 大 概率 及 L? 中 最 大 范 数 的 估计 式 (135) 

З. 鞭 的 不 等 式 (137) 

4. ТИЕН A АЗ Е (141) 

5. 二 次 可 积 鞭 大 偏差 概率 的 估计 (143) 

6. 一 次 可 积 蒜 与 其 一次 特征 最 大 比值 概率 的 估计 (145) 
7. 练习 题 (146) 


аш КЖЕ (148) 


1. ЯВ ОТТЕ ЕЕ (148) 

2. ЛАЯ ЛЕ L! ЕВЕ (149) 
3. НОЖИ ЖА ЯНЬ ЖА (150) 

4. 应 用 列 维 定理 的 例 (151) 

5. 练习 题 (154) 


ТИНЫ (155) 


. 随机 序列 类 C+ (155) 

‚ C+ ЖЕАЩЖКАЕМ (157) 
‚ 平方 可 积 鞠 的 性 质 (159) 
ле, 的 收敛 集合 (163) 
. 练习 题 (164) 


概率 测度 在 带 滤 子 可 测 空间 上 的 绝对 连续 性 和 奇异 性 (164) 


п Ром н 


1. 测度 的 局 部 绝对 连续 性 和 奇异 性 (164) 

2. 应 用 绝对 连续 性 和 奇异 性 准则 的 例 (168) 

З. 测度 的 绝对 连续 性 和 奇异 性 与 “可 预测 性 ”(169) 
4. 哈 伊 克 - 费 里 德 曼 择 一 性 (172) 

5. И (176) 

6. ЧЕ (177) 


随机 游 动 越 出 曲线 边界 的 概率 的 渐 近 式 (177) 


1. 概率 Р{т> п} 的 渐 近 式 (177) 
2. 定理 1 的 证 明 (178) 

3. 双 侧 界限 的 情形 (181) 

4. 练习 题 (182) 


相依 随机 变量 之 和 的 中 心 极 限定 理 (182) 
. 函数 的 中 心 极限 定理 (182) 
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. 一 致 疡 近 可 忽略 性 (184) 
. 定理 1 的 证 明 (185) 

. 辅助 命题 (191) 

. 定理 2 的 证 明 (192) 

. 定理 3 的 证 明 (194) 

. 定理 4 的 证 明 (194) 

. 平方 可 积 鞭 - 差 的 情形 (194) 
. 练习 题 (195) 


© ©з оф а» оф мю 


$9. 伊 芯 公 式 的 离散 版 本 (195) 


1. 引言 (195) 

2. 二 次 协 方差 的 积分 表示 (195) 

З. 伊藤 公式 的 离散 版 本 (197) 

4. 例 (198) 

5. 布朗 运动 的 伊 芯 变 量 痊 换 公式 (199) 
6. 练习 题 (200) 


$10. 保险 中 破产 概率 的 计算 . ЛХ (200) 


. 破产 概率 (200) 

. 克拉 默 - 伦 德 伯 格 模型 (201) 

. 克拉 默 - 伦 德 伯 格 模型 下 的 破产 概率 (202) 
‚ 连续 时 间 的 情形 (204) 

. 练习 题 (204) 


511. 随机 金融 数学 的 基本 定理 . 无 仲裁 的 著 特 征 (205) 


. 引言 (205) 

. 金融 数学 的 某 些 概念 (205) 

. 有 价 证 卷 总 存 和 自 筹资 金 总 存 (206) 
‚ 随机 金融 数学 的 第 一 基本 定理 (207) 
. 例 (211) 

. 随机 金融 数学 的 第 二 基本 定理 (212) 
. 练习 题 (218) 


512. 无 仲裁 模型 中 与 “套头 交易 ”有 关 的 核算 (218) 


. 购 货 保留 权 (选择 权 ) (218) 

. 购 货 保留 权 (选择 权 ) 的 类 型 (219) 
. 完全 市 场 和 不 完全 市 场 (219) 

‚ 价格 公式 (220) 


por- 


юг 


зо = ә g 


ьо мю 
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5. 美国 型 购 货 保留 权 (选择 权 ) (221) 
6. 欧洲 型 购 货 保留 权 (选择 权 ) (222) 
т. 选择 权 实 际 核算 的 例 (223) 

8. 练习 题 (225) ` 


最 优 停 时 问题 . WA (226) 


1. “A 价格 (226) 

2. 价格 最 高 的 时 间 (227) 

З. ЛЕШ ЖЧ Н (228) 
4. 定理 1 的 证 明 (229) 

5. ЖИН) А” 视角 (230) 
$. 停 时 集 与 继续 观测 集 (231) 

т. (232) 

8. ЖЗ (233) 
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КОНВЕНТА — 装 论 的 基本 概念 , 是 受 博弈 实践 的 
启发 引进 的 , 但 是 后 来 这 些 概念 成 为 现代 数学 非常 精细 的 工具 之 一 …… 


J. L. 杜 布 (J. L. ОооЬ) (А87) [127] 





51. 蒜 和 相关 概念 的 定义 


1. 这 一 节 的 研究 对 象 —- H 在 概率 论 中 , 用 各 种 不 同 的 方法 研究 随机 变量 
之 间 的 相依 性 . 在 (B) 随机 序列 的 理论 中 , 基本 特征 是 协 方差 函数 , 而 且 该 理论 的 
一 切 结论 完全 决定 于 协 方差 函数 的 性 质 . 在 马尔 可 夫 链 的 理论 中 (第 一 章 812 和 第 
八 章 ), 基本 特征 是 转移 函数 , 它 决定 由 马尔 可 夫 相依 性 联系 的 随机 变量 的 演变 . 

在 这 一 章 ( 亦 见 第 一 章 811) 将 引进 相当 广泛 的 随机 变量 序列 类 (ВЕ), 
而 关于 其 祖 依 性 的 研究 , 利用 基于 条 件数 学 期 望 性 质 的 研究 方法 . 

2. (ТВ) 的 概念 ”假设 给 定 一 带 过 小 ( 流 ) 的 概率 空间 (О, 多 ,P), 所 谓 过 
E ( 流 ) 即 o - 代数 族 (Fn), 其 中 F nn > 0, МН Я.С 9: С...СЯ (“НВ 
率 空间 ”). 

设 Хо, Xoo 是 概率 空间 (ОЎ Р) 上 的 随机 变量 . 如 果 对 于 每 一 个 n> 0, 变 
их, 是 Я, - TAH, WAE X = (Xn F 2) лхо 或 简 记 X = (Xn, F n), 称 之 为 
随机 序列 . 

假如 随机 序列 X = (Xn F n) 还 具有 性 质 : 每 一 个 n> 1, 变量 Xn 是 Fn-1 - 
可 测 的 , 则 记 作 X = (Xn F 7-1), #Н Я, = Fo. 这 时 称 X 为 可 预测 随机 序 
Я]. 序列 (Х„)„>о 称 做 递增 的 , ШЖ Xo = 0 Н Xn < Х„+(Р-а.с.). 

定义 1 随机 序列 X = (Xn F n) Ж (FH), 如 果 对 于 一 切 n > 0, Н, 


ElXn| < о, (1) 
Е(ХьнЯ >) с Xn (Рас). (2) 

随机 序列 X = (Xn F n) 称 做 上 次, 如 果 序 列 -X = (-Xn F n) EFR. 
在 特殊 情形 下 , 假如 Я, = 9%, 其 中 FX = o(Xo,… ,Xn), 并 且 随 机 序列 


X = (Xn F n) Ж (Е), 则 称 序列 (Xn)n>o ЖЯ ЖАЙ СЕЮ). 
由 条 件数 学 期 望 的 性 质 , 容易 证 明 , 条 件 (2) 等 价 于 : 对 于 任何 n>0 和 Ae Я», 


Х.Р = XndP. 3) 
Ј хла 5, | х (3) 


有 


яп. 著 和 相关 概念 的 定义 ши. 





1 Я (6n)nzo 是 独立 随机 变量 序列 , Б, < оо, Efn = 0,Х„ = fo +-+ 
EnF n = 0(60,… En), 则 随机 序列 X = (Xn, F n) ЖЮ. 
002 (Enno 是 独立 随机 变量 序列 , Eén = 1, 则 随机 序列 X = (Xn Fn) 
њав, 其 中 А 
Xn= По, Fn = olo: 6). 
к=0 
$3 HE 是 随机 变量 序列 , БЕ < оо, Fo СУС... СЯ. 则 随机 序列 
= (Xn F n) Я, 其 中 Xn = (EF n) ( 称 做 列 维 (P. P. Lévy) #). 
例 4 如果 (en)n>o 是 非 负 可 积 随机 变量 序列 , 则 序列 (Xn) ЖЮ, 其 中 Xn = 
otte + &- 
Я5 ИХ =(Х,,9,) ЯМ, № g(z) 是 四 (AFA) 函数 , Н Elg(Xn)| < 
оо,п > 0, 则 (由 第 二 章 56 RIER (I. L. Iensen) 不 等 式 可 见 ) 随机 序列 (9(Xn), F n) 
ЖТ. 
假如 X = (Xn F n) ЖТ, 而 g(z) ЖМЖ, 且 对 于 一 切 , n > 0, Elg(Xn)| < 
оо, 则 随机 序列 (9(Xn), F n) ВЕТ. 
在 定义 1 中 所 作 的 假设 Е|Х„| < со, 保障 条 件数 学 期 望 B(X nF n) n > 0, 
的 存在 性 ， 不 过 , ERER Е|Х„,| < оо 的 情况 下 ,这 些 条 件数 学 期 望 也 可 能 存 
在 ， 我 们 知道 根据 第 二 章 87, ЕСХН n) 和 EX paS n) 总 有 定义 , 如 果 (# 
Р(ААВ) = 0, ДД A = В (Р-а.с.) 表示 ) 
(о: E(X fal n) < ооо: (Х|) < 00} =Я (Р-ас.), 
WAR Е(Х. 49.) 有 定义 , 且 根据 定义 设 
Е(Хьы#„) = E(X iplf n) — E(X rlf n). 
由 此 可 见 , 下 面 的 定义 是 自然 的 . 
定义 2 МИЛЯХ = (Xn F n) RÉ (ТЖ), 如 果 对 于 一 切 n> 0, 有 
ЕХО < о, 而 且 E(Xni1|Fn) 有 定义 , 并 满足 条 件 (2). 
ER, ші хая, ХЈУ ХЕ E(X galna) < оо, ШАРТ ХӘ 
E(|Xn+ill n) < оо (Р-а.с.). 
з. 马尔 可 夫 时 间 ”下面 的 定义 引进 的 马尔 可 夫 时 间 的 概念 , 在 以 后 介绍 的 全 部 
理论 中 有 十 分 重要 的 作用 . 
定义 3 ”在 集合 {0,1,… ,+oo} 中 取 值 的 随机 变量 7 = r(w), 称 做 (关于 o- 代 
ЖЖ (F „) 的 ) 马尔 可 夫 时 间或 “不 依赖 于 将 来 的 随机 变量 ", 如 果 对 于 每 一 个 n> 0, 
{r=n} Ee Fn. (4) 


对 于 P{r < оо) = 1 的 情形 , 马尔 可 夫 时 间 т, 称 做 停止 时 间 . 
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BX = (Xn, F n) 是 一 随机 序列 , Шт (关于 о - КЖ (F „)) 是 马尔 可 夫 时 
в. в 


Хх.) = УХ) lw) 
n=0 
(于 是 Xo = 0, 即 在 集合 {w :7 = оо) E X, = 0). 
ЖА, 对 于 每 一 个 Ве. (В), 
(w: Х, € B} = (0: Хь ЕВ = ор Чы: ХЕ Вене, 
п=0 


从 而 Xr = Xr(w(w) 是 随机 变量 . 
例 6 Их=(х,,Я,) 是 一 随机 序列 , 而 В EBR). WA, (首次 到 达 集 合 
B 中 的 ) 时 间 
тв = inf{n > 0: Xn E€ B} 


(№ {} = 2 时 тв = +оо) 是 马尔 可 夫 时 间 , 因为 对 于 任何 m> 0, 有 
{тв =n} = {Xo ¢ B,- ,Xn-1 @В,Х„є В} ЕЯ». 


йт ИХ=(Х, In) Я (Т), 而 7 (关于 o - КЖ (F n)) 是 马尔 可 
夫 时 间 . 那么 “停止 ” 序列 XT = (Хол, F n) EHRE (F). 
事实 上 , 由 关系 式 
п-1 


Хелт = у ХаЦт=т} = Xnlir>n} 


т=0 
可 见 , 随机 变量 Хд. 为 Я, - 可 测 的 和 可 积 的 , Н. 
Хил» 一 XnAr = Tr>n}(Xn+t1 — Ха), 
由 此 可 见 
Е[Хиыулт — Xnar|F а] = Iron) ElXnt1 — Х|] &° 
与 每 一 个 о -RAIK (F n), 及 关于 (F n) 的 马尔 可 夫 时 间 т, 可 以 与 一 集 系 
#„={Ає #:АГ\{т=п}є.#„, 对 于 一 切 n>0} 
НЕХ. BRICS, MI, 关于 求 可 数 次 并 运算 封闭 . 此 外 , ШЖ AEF, М 
Я = п} = {r = n} (АП = пре Я», 


KAES, 由 此 可 见 7, o- К. 

如 果 把 9, 视 为 在 时 刻 n (包括 п) 之 前 观测 到 的 事件 的 全 体 , 那么 Я, 可 以 
视 为 在 “随机 ”时 间 7 观测 到 的 事件 的 全 体 . 

不 难 证 明 (练习 题 3), 随机 变量 r 和 X, 是 多 - 可 测 的 . 


п. 鞍 和 相关 概念 的 定义 биз. 





4. 局 部 鞭 和 鞭 变 换 

定义 4 称 随机 序列 X = (Xn F n) HARR (ARTH), 如 果 存 在 (局 部 化 
的 ) 有 限 马尔 可 夫 时 间 序 列 (Tk)k>1 : Tk < тъ (Р - а.с.), ть To0(P — а.с.), k — оо, 
且 每 一 个 (“停止 ") 序列 Xm = (Х.лар F n) 是 对 (Т®. 

下 面 在 定理 1 中 证 明 , 实际 上 局 部 著 类 与 广义 拷 类 等 同 . 此 外 , 每 一 局 部 鞭 可 以 
借助 于 所 谓 鞭 变换 , 由 某 一 著 和 某 一 可 预测 序列 得 到 . 

定义 5 ЙҮ = (Yn, F n)nzo 是 随机 序列 , 而 V = (Vn F „про 是 可 预测 序列 
(Я: = #%). 随机 序列 VY = ((У.Ү)„,#„), 其 中 


у-у) = WY + УИА, (5) 
i=l 
而 AY, = У-Ү. ЖЖУ 由 V 的 变换 . 此 外 ,如 果 Y ER (RARR), VY 
ARER. 
定理 1 RX = (Xn Я), 是 随机 序列 , 其 中 Xo = 0(P 一 a.c.). 下列 各 条 


b) X 是 广义 鞭 ; 
с) X ARER, 即 存在 可 预测 序列 VV = (Vn, F n)nz0(Vo = 0), = У = (Yn, 
97.) >0(0 = 0), ж Х=У.У. 
证 明 а) 55). Я X ERRE, № (т): 是 局 部 化 马尔 可 夫 时 间 序列 . ЖА, 
对 于 任何 т> 0, 
Е| Хъл, Щхт,>}] < oo， (6) 


从 而 
BllX(nt ar Hirn] = ЕХ) < оо. (7) 


随机 变量 non) Ж Sn- 可 测 的 . 因此 由 (т) RTA, 有 
ЕХ) |3 п] = >) Fn] < оо (Р – a.c.). 
这 里 , (ар 一 0 (Р-а.с.), k — оо, 因而 
Е Хы, < оо (Рас). (8) 


由 于 这 一 条 件 , 知 Ех, n) 有 定义 , АЯТЕ Е Хи п] = Xn (Р-а.с.). 
为 此 , 需要 对 于 AES n 证 明 


J Х.Р = f Х,ар. 
А А 
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由 第 二 章 $7 练习 题 7 Я Е ХЦ Я | < ce(P - а.с.), 当 且 仅 当 测度 
Ј чав, AEF, 
А 
Æ o- 有 限 的 . 现在 证 明 测度 [,|Х„|4Р,А < Fn, 也 是 vc- 有 限 的 . 
由 于 Xm ER, Х| = (ХШ >. F n) EFE, AT ({т. > п} EF n), 


Јом ель „>Р 
Аг{тъ>п) Аг{ть>тп} 


< Хулла Шаар = 人 хь. 
А>) Anir >n} 


令 上 一 00, 得 
ахыр < f Xanlar, 


因此 就 证 明了 测度 |, ХР, АЕ F, Ж о 有 限 的 . 
ле, 4 [Хи ЧР < оо. 那么 ,根据 勒 贝 格 控制 收敛 定理 , 可 以 在 下 列 


式 子 中 求 极限 : 
/ XndP = f Хар, 
А>) Аг(тъ>я} 
而 由 于 X ERRA, 可 见 求 极限 是 合理 的 . AT, 有 


] XndP = f. XnndP, 
4 А 


而 且 对 于 任意 4 e #„, /, ХР < оо. 由 此 可 见 , 对 于 任意 АЕ, 上 面 的 等 
式 成 立 , 从 而 Е(Х,+112 n] = Xn(P -- а.с.). 
b) > 0). ВАХ, = Xn — Xn-1, Хо = 0; Vo = 0, Vn = ВАХ, |-> 1); 18 


-1 
wve [= [0 0), 
0, #0, 
% =0 A Ya = Ў W:AXiln > 1). BA 
i=l 


EllAYal|F n-i] <1, ЕДУ, Я n1] = 0, 


从 而 , Y = (Ya, F n) Ж. 其 次 Xo = Vo -Yo = 0, A(V -Y)n = AXn. FÆ X =V-Y. 
с) а). Ж X = У.У, ДФУ 是 可 预测 序列 ,Y ЖЖ, T Vo= Yo =0. В 


Tk = шп > 0: |11 > k}, 


п. 车 和 相关 概念 的 定义 “115. 





且 当 集合 {} = о 时 To = оо. 由 于 Улы 是 Fn- 可 测 的 , 可 见 对 于 每 一 个 之 1， 
变量 т, 是 马尔 可 夫 时 间 . 

考虑 序列 X™ = ((V -Yna Цор а). 

在 集合 {rk > 0} E [Vnan] < k. 故 对 于 任意 n> 1, 有 (VY)nan охо < оо. 
EK, 对 于 任意 n> 1, 有 


Bf(V .Y)m+barn — (VY)nan Що n} 
= Tn>o}VintDAn BE{YintDAn — Узлы а) = 0, 


因为 (WA 7) 也 (YXn+DAm — Ул [2 n} =0. 

于 是 , 对 于 每 一 个 > 1, “停止 ” 序列 Xm Я, 其 中 т, Т oo (Р 一 a.c.), 从 而 
хаяв. о 

5. НЕБО “М ПР 

例 8 (mhz 是 独立 同 分 布 的 伯 努 利 随机 变量 , Н P{m = 1} = p,P{nn = 
-1} =фр+а = 1. 假如 考虑 某 项 博弈 , 可 以 把 事件 {m= 1) 视 为 某 选手 在 第 n 局 
中 “成功 ”( 赢 ), 而 把 事件 (т, = —1} 视 为 在 第 n 局 中 “失败 ”( 输 ). 假设 Vi 是 第 n 
局 的 赌注 . ЖА, ВЕЕ п 局 赢得 的 总 金额 (总 收益 ) 等 于 


Xn = Уул = Xn-1+ Vpn, Xo=0. 
i=l 
完全 自然 , 第 п 局 的 赌注 У, 可 依赖 于 上 一 局 的 结果 , 即 依赖 于 Vi- , Vn- 和 
Mmo- RUER, 如果 设 Fo = (0,0) 和 Я, = о{т, m} МУ, Ж 
F n-i 可 测 随机 变量 , 即 决定 赌 徒 “策略 ”的 序列 V = (Vn F „_,) 是 可 以 预测 的 . 
НУ, =т + +з, 则 有 


Xn = мА, 
i=1 

则 序列 X = (Xn F n), 其 中 Xo =0, ЖУНУ 的 变换 . 

按 博弈 的 观点 , 如 果 每 一 步 的 期 望 收益 E(Xn+1 一 Xn n) = 0 (> 0 或 < 0), M 
该 博弈 是 公平 的 (有利 的 或 不 利 的 ). 因此 显然 , 博弈 是 

公平 的 , 如 果 p = 4 = 1/2, 

ЖЖ, 如 果 p > 9, 

不 利 的 , 如 果 p < 9. 
由 于 序列 X = (Xn, F n) 构成 

Ф, 如 果 p = а= 1/2, 

ТФ, 如 果 了 > 和， 


- и6 第 七 章 ”构成 鞭 的 随机 变量 序列 





Е, 如 果 p <g， 
则 可 以 认为 , 关于 该 博弈 是 公平 的 (有利 的 或 不 利 的 ), 对 应 于 关于 序列 х ER (下 
PREH). 

现在 考虑 特别 的 “策略 ”类 У, = (У, Яир, ЖФ Vi =1Ж 


и 12 Жта-ь ms], 
"|0. 若 不 然 ， 


该 式 的 含义 是 : MEARE У, = 1 开始 , 每 当 他 赢 一 局 时 就 将 赌注 增加 一 倍 , 而 每 
当 他 输 一 局 时 就 终止 博弈: 
假如 = —1,--- ль = 一 1 则 经 n 局 赌 徒 的 总 损失 等 于 


n 


Yer- 


iml 


t>, (9) 


因此 , 假如 再 假设 таъ: = 1, 则 
Хы = Xn + Vapi = —(2®—-1)+2° =1. 
@т=ш{п >1: Xn =1}. ШЖ р = = 1/2, УЗНАЮ, Ж 
Pir=nj= 2, Р{т < о} = Р(Х, =1)=1, ЕХ, =1. 

RH, 甚至 在 公平 博弈 的 情形 下 , 如 果 赌 徒 坚持 运用 “策略 ”(9), 他 (以 概率 1) 经 过 
有 限时 间 完全 可 以 顺利 的 结束 博弈 , 并 使 自己 的 赌注 再 增加 一 个 单位 (ЕХ, = 1 > 
Xo = 0). 

在 博弈 的 实际 中 , 在 输 局 时 加 倍 赌注 而 在 首次 赌 赢 时 停止 博弈 , 所 描绘 博弈 的 
ЖА. 也 正式 由 此 产生 了 数学 概念 “ 鞭 ". 

Ж 在 p=g=1/2 的 情形 下 , 序列 X = (Xn F „)„»о E2, 其 中 Xo = 0, 因而 
对 于 任何 n> 1， 

ЕХ, = EXo = 0. 

因此 , 假如 将 考虑 时 刻 п 换 成 考虑 随机 时 刻 r， 则 可 以 指望 该 关系 式 仍然 成 立 以 
后 (82 定理 1) 会 清楚 地 看 到 , 在 “典型 ”的 场合 ЕХ, = ЕХ RE. 而 这 一 等 式 不 
RX (如 上 面 考虑 的 博弈 ) 的 情形 , 出 现在 所 谓 “物理 上 不 可 实现 ”的 场合 , 这 时 或 者 
т, 或 者 |Х„| 取 的 值 过 分 地 大 . (应 该 指出 , 上 面 考虑 的 博弈 的 情形 是 物理 上 无 法 实现 
的 , 因为 它 假定 博弈 时 间 无 限 , 以 及 赌 徒 的 初始 赌资 无 限 .) 

6. 著 一 差 

定义 6 МИЛЯ Е = (En F „изо 称 做 著 - 差 , 如 果 对 于 一 切 n > 0, Elén| < 
оо а 

E(ên+1}F n) =0 (P — a.c.). (10) 
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由 定义 1 和 6 可 以 清楚 地 看 到 靳 与 装 - 差 之 间 的 联系 . 具体 地 说 , 如 果 X = 
(Xn F n) ERR, 则 Е = (En F n) Ж - 差 , 其 中 & = Хо,&„ = AXn,n 之 1. 同样 地 ， 
MR E= (En F n) Я, МХ = (Xn, F n) EB, EP Xn = Eo t H En. 

按照 这 一 术语 , 如 果 Eén = 0,n > 0, 而 相应 的 o- 代数 为 Fn = o(&0,… ,én)， 
则 任何 独立 可 积 随机 变量 序列 E = (Е) хо ER - Ж. 

т. ТЯ (ЕЙ) 的 构造 ”下面 的 定理 使 下 款 (EB) 的 结构 更 加 清晰 

定理 2 (#% (J. L. Doob)) it X =(Xn Fn) ЖТЖ, NAAR т = (та, 
Fn) 和 这 样 的 可 预测 递增 序列 А = (An F n-i), ВАТА n > 0, 有 杜 布 分 解 : 


Xn=nm+An (Р-а.с.). (11) 
而 且 类 似 形 式 的 分 解 唯一 . 
ЗЕЯ 设 mo= Хо, Ao = 0, M 
п-1 
mn = то + У [Хы — Е(Хн 9), (12) 
i=0 
п-1 
An = УЕ, 5) – ХУ. (13) 
50 


这 样 定义 的 т 和 A, 显然 具有 所 要 求 的 性 质 ， 其 次 , ЖИ Х„ = m, + Ah 其 中 
т = (т, F n) Ж, 而 A = (Ap F „-1) 是 可 预测 递增 序列 . ЖА, 

Акы Аһ = (Аһ+1 — Аһ) + (таф — та) — (тии — ть), 
然后 在 等 式 两 侧 同 求 条 件数 学 期 望 , 得 An 一 Ah = Any 一 An (Р - ac) 由 于 
Ao = А, = 0, 说 明 对 于 一 切 m> 0, An = А, (Р — а.с.) Я т» = m, (Р —в.с.). O 

由 分 解 (11) 可 见 , 序列 A = (An F „_,) 补偿 X = (Xn F n) ЖЖ. 这 说 明 
如 下 定义 是 合理 的 . 

жут HAAR (11) 中 的 可 预测 递增 序列 А = (An F n1), 称 做 (ТЮ X 
的 ) я. 

如 果 ЕМ? < ооп > 0, АЖ М = (Mn, F mn)n>0 为 平方 可 积 的 ， 在 研究 平 
HTAR М = (Mn, 罗 ja>o 时 , 杜 布 分 解 起 核心 作用 , 因为 根据 上 面 的 说 明 随机 序 
列 М? = (М2,Я„) ЖОЕ. 根据 定理 2, НЕЙ т = (т, Я n) 和 可 预测 递增 序列 
(М) = ((M)n, F n-1), E 














Ма = mn + (М)л. (14) 
序列 (М) ЖИ M 的 二 次 特征 , 并 在 许多 方面 决定 其 构造 和 性 质 . 
由 (13) 式 可 见 ， у 
(м), = УЕМ, 1, (15) 
j=1 
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而 且 对 于 一 切 1 < k, 有 
Е(М, — М)13 = Е[МЁ — МР Я] = Е(М)ь – (М) 1, (16) 
特别 , Æ Mo = 0 (P — a.c.), 则 
ЕМ? = Е(М),. (17) 


有 益 地 指出 , 如 果 Mo = 0,М„ = & 十 … 十 名 , 其 中 (En) 是 独立 随机 变量 序列 ， 
В. Её = 0, E£? < оо, 则 二 次 特征 


(М), = EM? = Юё +-+- + Dén (18) 


是 非 随机 的 , 并 且 等 于 Mn 的 方差 . 
WR X =(Х„,#„) МУ = (Yn F n) ЖАН, 则 设 


(ху, = ИХ +Y )n = (Х-Ү)„]. (19) 
不 难 验 证 , (XnY% 一 (X,Y 了)n,Fn) Ж, 因而 对 于 任意 < к, 
也 [CC – Xi) (Yk — YF = ELX, У), – (Х,У) Я Ц. (20) 
щх, =& + +& A Yn =т+---+ 1 时 ,其 中 (En) 和 (mm) 是 独立 随机 变 
量 序列 , 而 且 Бє = Ет = 0, E£? < oo, En? < оо, 变量 (X,Y)n 等 于 
(X,Y)n = У соу(&@.тһ). 
i=l 


序列 (Х,У) = ((Х, У)» F n1) 常 称 为 (平方 可 积 ) Ж X 和 Y 的 相互 特征 . 不 
难 验证 , 有 (对 照 (15) Ж) 


(X,Y)n = Уоважаня ed 
下 面 两 个 量 在 鞭 论 中 也 有 重要 作用 : 一 个 是 二 次 协 方差 
[X,Y] = ахак, 
另 一 个 是 二 次 变 差 
Xh = ухах). 


这 两 个 量 对 于 任何 随机 变量 序列 X = (Xn)n>1 ТҮ = (Yn)w>1 有 定义 . 
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8. БИН: ”鉴于 定理 1, 自然 产生 一 个 问题 , 局 部 拷 (因而 , ГУ 
RREH) 实际 上 本 身 也 是 款 . 

定理 3 1) 设 随机 序列 = (Xn, F n)nz0 ARR (其 中 Xo = 0. 或 更 一 般 
№ ЕХо| < оо). 

э $ EX; < оо,п > 0, Җ ЕХ} < оо,п > 0, ЖЕР] X = (Xn, F n)nz0 Ж. 

2) ЖХ = (Xn F „)о<и<м(М > 0) 是 局 部 著 , 或 EXN < оо, Җ ЕХу < оо. Я 
АХ =(Х„,.Ў „)о<п<у ЖЖ. 

证 明 1) EH, ERI “ЕХ, < o0,n >0” 和 “ЕХ < co,n >0” 中 任何 一 个 
条 件 成 立 , 则 条 件 “Е|Х„| < со, п > 0” 也 成 立 . 

事实 上 , 假如 对 于 一 切 n > 0,ЕХ < оо. ЖА, НИ (Е. Fatou) 引 理 , Я № 


ЕХ} = ElimX fan SlimEX 思 mw = lim[EXnan + BX,] 
k k k 
= EXo + limEX zan, < ВХ + EXF < оо. 
k k=0 
从 而 , E|Xn| < оо,п > 0. 
为 证 明 (EX F n) = Хап > 0) КОНЕ, 注意 到 对 于 任意 马尔 可 夫 时 间 ть, 
有 


n+l 


|Х(+лулт,| = J Xil 
i=0 


其 中 


п+1 


ED Х| < оо. 


і=0 

因此 , 由 勒 贝 格 控制 收敛 定理 , 经 在 关系 式 局 (Xn+yAm| 多 ) = Хале, 中 极限 
过 渡 (k — оо,ту 1 оо(Р 一 a.c)), 得 BXnn|Fn) = Xn(P — а.с.). 

2) 假设 EXN < оо, 证 明 对 于 一 切 n < М,ЕХ; < оо. 

事实 上 , РАНЫ Г ХВ, 可 见 Xn = EE(XntilFn), 其 中 也 (|Xn+il F n) 
< оо (Р-а.с.). ЖА, 根据 对 于 条 件数 学 期 望 的 延 森 (1. L. Iensen) PER ( 见 第 二 
章 87 练习 题 5), 有 Xi < E(X ralf n). 因此, EX; < ЕХ, < ЕХ < оо. 

于 是 , 由 命题 1), 可 得 所 要 证 明 的 局 部 蒜 X = (Xn, F „)оспсм КЖ. 

9. 练习 题 

1. 证 明 条 件 (2) 和 (3) 的 等 价 性 . 

2. Ж о 和 是 马尔 可 夫 时 间 , 证 明 r о, туо, тло 也 是 马尔 可 夫 时 间 , 并 且 
如 果 o <7, 则 多。 CF, 

3. UE r A X, 是 多, - 可 测 的 . 

А. ЖУ = (Yn, Я n) Е (F8), У = (人 ,多 。1) 是 可 预测 序列 , (У-У)„,п >0 
是 可 积 随机 变量 . 证 明 У-Ү 2 (ТЮ). 
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5. У, 2 多 。 2 IÑ о КЖ, 而 с 是 可 积 随机 变量 ， 证 明 序列 
(Xn)nz1, 其 中 Xn = EEF n), Eit, 即 对 于 任何 n>1, 有 


E(XnlXnt1, Ха+ә, +) = Хы (Р-ас.). 


6. 设 &1,62,… 是 独立 随机 变量 , Н. 


n 
P{& = 0} =P{&=2=3 和 х,= ls 
证 明 不 存在 可 积 随机 变量 5 和 非 降 o- 代数 族 (F n), E Xn = EEF n). (这 个 例子 
说 明 , 并 不 是 每 一 个 蒜 (Xn)n>1 都 可 以 表示 为 (EEF „))„>; 对 照 第 一 章 811 例 З). 
Т. (а) Я 6&1,62,… 是 独立 随机 变量 , 且 对 于 n > 1,Е|&„| < оо, Ев, = 0, 证 明 对 
于 每 一 个 上 > 1, 序列 


Х#= У бб, п>® 
ISi < <i sn 
ER. 
(b) 设 &1,€2,… 是 可 积 随机 变量 , 满足 
Бы, ы) = Тв 
证 明 序列 Хі, X2，… ER. 
8. 举 一 舱 的 例 X = (Xn, F „)„>1, 而 随机 变量 族 (Х„,п > 1) 不 一 致 可 积 . 
9. 设 X= (Xn)nz0 是 马尔 可 夫 链 (第 八 章 81), 且 其 状态 的 集合 Е = {ij} 
是 可 数 的 , 而 pi 是 它 的 转移 概率 . 此 外 , BR y = yw(z),z e Е, 是 有 界 函数 , 并 且 满 
足 条 件 


(= Xn). 


Уру) < №4, А>о, ЕВ. 


ЗЕЕ 


证 明 序列 (A-"w(Xn))n>o Е. 


$2. 在 时 间 变 量 为 随机 时 间 时 鞭 性 的 不 变性 


1. 杜 布 定理 WR X = (Xn F n)n>0 Ж, 则 对 于 一 切 >1, 
ЕХ, = EXo. (1) 
假如 将 时 间 пл 换 成 随机 时 间 (例如 , 马尔 可 夫 时 间 ) т, 那么 上 述 性 质 是 否 仍然 成 立 ? 
在 上 一 节 例 8 中 举 的 例子 说 明 , 一 般 并 非 如 此 : FER Х 和 (以 概率 1 有 限 的 ) 马 


尔 可 夫 时 间 т, 使 得 
EX, #ЕХо. (2) 


下 面 的 重要 定理 描绘 一 些 “ 典 型 ”情形 , 其 中 包括 ЕХ, = EXo 的 情形 ， 
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定理 1 (44%) ЖХ=(Х„,Ў„) ЖЖ (Т®), n Же т; 是 停止 时 间 , 满足 
ЕХ, | <, #=1,2. (3) 
lim IXnldP = 0. (4) 
т—оо{ту>п} 
ЖА, 
Е(Х» Я n) б) Xn Цъ>2т};Р - а.с.). (5) 
ЖА, wR Р{п < т} =1 М 
Ет; ©, En. (6) 
证 明 А ШЕН, 对 于 任意 дея, 
Х,аР = х.ар. 
Г > 人 
同样 , 为 此 只 需 证 明 , 对 于 任意 > 0, 有 
/ Хар = ] XndP, 
AN{r2>n}N{n=n} (>) Jan{nzn}n{n=n} 
或 者 
АР = „ар. 8 
мз (>) (ЭЕ: Чч (8) 


其 中 B=AMn=n}E Fn. 
因此 , 有 


XndP = f 
Вс\{тз>п} Вт 


Х,ар + Í Х„аР 
=п} Вг{т>п} 


Х,аР + f Е(Х, 119 n)dP 
Вг{т>п} 


-f ХьаР+ | Xn41dP 
BN{T2=n} BN{r2>n+1} 


= f XndP + J Xn42dP 
(<) /вг{п<тз<п+1} Вг{тз>п+2} 


AI a 


从 而 , 有 


ар 
Вг{пҳт<т} 


ah XrdP + / XmdP. 
Bn{nSrgm} BN{r2>m} 


ар = XndP — f XmdP, 
(>) Јвгцп<т} Bnfm<rz} 
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并 且 由 于 (4) 式 和 等 式 Xm = 2X 直 一 |Xml, 得 


j XndP = lim f х„ар- f XmdP 
BN{T2>n} (2) mm 一 cc |у вг{а<т} Bnfm<rz} 


= у. XrdP — lim XndP 
BN{ngra} mm 一 oo /вст<тз} 

2 ] Х,ар. 
Вг{п<т} 


于 是 (8) RHE, 故 (5) 式 也 得 证 . 最 后 , 由 (5) 式 得 (6) R. o 
系 1 如 果 存在 常数 N, Рт < М} =1,Р{т› < М} =1, 则 满足 条 件 (3),(4). 
因此 , 如 果 同 时 Р{т<т;}=1 ВХ Ж#, 则 


EXo = En = Ет = ЕХм. 


Ж 2 如 果 随机 变量 族 {Xn} 一 致 可 积 (特别 , 如 果 以 概率 ], 有 |Xn| < C < 
оо, п > 0), 则 满足 条 件 (3), (4). 

事实 上 , 由 于 P{r > п} 一 0,n 一 оо, 故 由 第 二 章 86 引 理 2 可 以 得 出 条 件 (4). 
其 次 , 由 于 随机 变量 族 {X,} 一 致 可 积 , 可 见 ( 见 第 二 章 86 (16) 式 ) 


sup EIXn| < оо. (9) 
如 果 т 是 某 一 停 时 , 而 X ЖОЕ, 则 将 系 1 用 于 有 界 停 时 rw = тл М, 可 见 
EXo < ЕХ,,. 


Ж, 
ВХ, | = 2ЕтД, – ЕХ, < 2ЕтД, — EXo. (10) 


序列 X+ = (Х},#„) ЖЕ (61 #Ї 5), 从 而 


о + + 
ЕХ}, Зу ВЕ, ар +f 
N 
< J хар + ] Х}АР = ЕХ$ <ЕХм| < sup EIXN|. 
{т=з} {т>} N 
由 此 连同 (10) R, 得 
Е|Х,„| < 3sup EIXN|. 


从 而 根据 法 图 引 理 , 得 
Е|Х,| < 3sup BlXnl. 


于 是 , 若 选择 т = mi(i = 1,2), 并 考虑 到 (9) A, 得 EX] < co,i = 1,2. 
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注 在 上 一 节 考 虑 的 例 8 中 ， 
J [XnldP = (2% — 1)P{7 > n} = (2% — 1)2-" >1, п оо, 
{т>п} 


从 而 , (对 于 т» = т) 条 件 (4) 不 成 立 
2. 杜 布 定理 的 特例 “对 于 应 用 , 由 定理 1 引出 的 条 件 常 是 重要 的 
定理 2 ЖХ = (Х,) жи (ТИ), 而 7 关于 (2) 是 停 时 ， 其 中 УЛ = 
0{Xo,… ,Xn}. 假设 
Ет < оо, 


ЖАТ п> 0 和 某 个 常数 C > 0, 有 


ЕХ - ХХ} < С ({т>»п};Р-ас.). 


ЕХ, | < оо, 
并 且 
ЕХ, = EXo. 11 
BE (11) 


证 明 现在 验证 , 对 于 n= r, 定理 1 的 条 件 (3) 和 (4) RE. 
ЖҮ» = |Xol, Y; = |Ху— Ху-1|,) > 1, W 


1х: < У» 
вна (Ss) - [уе = = А 
т=п} 
= YdP = |ы у Узар, 
оз ИЕ ууз т=п} {т>)} $ 


其 中 集合 {7 »у}=О\{т<)}є # у. 因此 对 于 j>1, 有 
ydP = / E(YlXo,… ,Xj-1)dP < CP{r > j}. 
{r>} {72} 
FË, 
ЕХ, <Е (>>) < cy Prr > j} + ЕХ] = СЕт + Е|Х| < оо. (12) 
j=0 ј=1 


其 次 , ШЖ т> п, W 
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所 以 
[XldP < / ydP. 


由 此 并 考虑 到 (根据 (12) 式 ), Е (5%) < оо, Вул 一 oo 时 {7 > п} | ©, 根据 
六 
控制 收敛 定理 , 有 


lim АР < im | Evar. 


—o0 J [r> {>n} 5 


于 是 , 定理 1 的 条 件 成 立 , 故 由 此 得 (11) R. 口 

з. 基本 瓦尔 德 恒等式 “现在 介绍 刚 证 明 的 定理 的 某 些 应 用 ， 

定理 3 (瓦尔 德 恒等式 ) йс, 是 独立 同 分 布 随机 变量 , 且 El] < оо, 
而 了 关于 (多 5) 是 停 时 , 其 中 # = ole быт >1,Ет < оо. ЖА, 


Е( +-+ + £+) = Вах Er. аз) 
如 果 同 时 又 ЕЕ? < оо, 则 
ЕЕ ++ + Er) - тва] = Ба x Ет. (14) 
证 明 显然 , (Ян: Я, 其 中 Xn = (E +… +&)-пЕб, В 


ЕХ 一 Х.Х, Хь] = Ен ~ ВЫ, +++ >En) 
= Е|.+1 – Е&| < 2Е|&| < оо. 
因此 , 根据 定理 2, 得 ЕХ, = EXo = 0, 从 而 (13) 式 得 证 . 
现在 给 出 “第 二 个 瓦尔 德 恒等式 ”(14) 的 三 个 证 明 ， 
AI Ят=&- Ев, Sa =т +. т. 需要 证 明 


ES? = Ет х Ет. 
# t(n) = т Лп(= тіпт, п). 由 于 
= +2 У) т, 


izi 1<i<j<n 


可 见 序列 (я- Èn, i 是 均值 为 0 MBR. 
nèl 
由 定理 1 HR. 1, 可 见 


т(п) 


Е5? =Е У 1. 


i=1 
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根据 “第 一 个 瓦尔 德 恒 等 式 ” (13), 有 


т(п) 


卫 》 = Ет х Ет(п), 
i=l 


因而 有 ES? = En? x Er. 
由 于 根据 假设 当 т, п 一 оо 时 , 类 似 地 可 得 


了 (Sr — 5,0) = En? x Е|т(п) — т(т)] — 0. 


FE, 序列 {57(n)}n>1 是 17 中 的 基本 序列 ( 柯 西 序列 , 见 第 二 章 $10 第 5 小 节 ), 从 
而 根据 第 二 章 810 定理 т, 存在 随机 变量 S, 使 E(Si(n) – 5)? 一 0,n 一 оо. 由 此 可 见 
(第 二 章 811 练习 题 1), Е52 „) 一 Е5?,п 一 оо. 上 面 已 证 明 ES?) = Ет x Ет(п), 
故 当 一 оо 时 得 ES? = En? x Ет. 

现在 只 剩 下 识别 变量 S$， 为 此 只 需 注意 到 存在 一 序列 (п) С {п}, 使 以 概率 1 
同时 有 收敛: Srn > SA r(n/) 一 т. 那么 , 以 概率 1 也 有 收敛 Srn) 一 Sr. 从 而 ， 
以 概率 1 有 5 = 5,, М ES? = En? х Ет, 而 这 正 是 要 证 明 的 . 

AI 由 已 证 明 的 等 式 ES? = En? x Ет(п) 和 法 图 引 理 ( 见 第 二 章 86 定理 
2 中 的 a)), 可 见 

ES? = ElimS?,) < ШШЕ52 n) < En? x Ет. 


如 果 能 证 明 对 所 有 n > 1, RER ES?) < ES? 成 立 , 则 欲 证 的 等 式 ES? = En? x Er 


就 随 之 得 证 . 
为 此 注意 到 , 由 “第 一 个 瓦尔 德 恒 等 式 ”(13), 有 


Е|5,| = Ет +++ + т < Е(рн| +++- + ||) = ВХ Ет < оо. 
因而 , 4 п 一 оо 时 , 有 


吾 |Sn|T(r > п) = Ет +--:+тЦт >п) 
< Еті +- + т) > п) < Elm] + -- + т >m) 一 0. 


运用 定理 1 (Я т = mm = т ЯК (Sal, F E)n) 可 得 , 在 集合 {r > n} Е, 
以 概率 1 有 
Е(15,113%) > 1511. 


由 (关于 条 件数 学 期 望 得 ) 延 森 不 等 式 (第 二 章 87 练习 题 5) 可 见 , 在 集合 {7 > 
п} 上 , 以 概率 1 有 
(52195) > 52 = 52. 
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但 在 集合 {7 <n} 上 ESAF) = 52 = 52. 所 以 以 概率 1 有 


EIF $) > 52 


т(п)* 
因此 , ЕЗ? > 52). 而 这 正 是 要 证 明 的 . 
Ш 由 “第 一 个 证 明 " 可 见 (= -È RFE) EH, 而 对 于 r(n) = 
TAN, 有 
ES? „у = Ет? x Ет(п). 


因为 Br(n) 一 Ет, ХДЕ ES? n 一 ES2. 而 为 此 只 需 证 明 


т(п) 


Езир 52) < оо, 
п 


因为 , 这 时 由 勒 贝 格 控制 收敛 定理 (第 二 章 86 定理 3) 可 得 要 求证 明 的 收敛 性 . 
为 了 证 明 不 等 式 Esup 52(,， < оо, 我 们 利用 将 在 下 面 83 中 引进 的 “最 大 不 等 


R” (14). 若 将 该 不 等 式 用 于 蒜 (Srp F Ero WE 


e| sup 8) < 4Е52 in) < 4sup ES? 
1<k<n n 


T(n)? 


由 此 利用 单调 收敛 定理 (第 二 章 86 定理 1), 得 
2 52 
E sup Sr < 4sup ES n): 


因为 
ES? „у = En? x Ет(п) < En x Ет < оо, 
所 以 
Esup S?n) < 4Em x Ет < оо, 
n 


54 


而 这 正 是 需要 证 明 的 . 口 

Я 设 61,62，,… 是 独立 同 分 布 随机 变量 序列 , L P{ti = 1} =Р{& = -1} = 
1/2,5 =& +... +, fa T = inf{n > 1: Sn = 1}. 那么 ,P{T < оо} =1 (例如 ,参见 
第 一 章 89 (20) Х), 因此 了 P{Sr- =1} =1Е8, = 1. 从 而 , (13) ATI Ет = оо. 

定理 4 (瓦尔 德 基本 恒等式 ) i Ein o 是 独立 同 分 布 随机 变量 序列 ， 且 
Sn =+- tinn > 1 假设 y(t) = Еее 及 ,而 且 对 于 某 个 如 承 0,p(to) 
存在 , 并 且 p(to) >1. 

如 果 r(r > 1) (关于 F$ = co(6 E)n > 1) 是 舍 时 ,使 |Sn| < C({r > 
n}; P - а.с.), 而 有 全 Er < оо, 则 


Е [ел] =1. (15) 
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证 明 记 
Yn = е°5» [p(to)]™™. 
WA, Y = (Яир ER, 其 中 БУ, = 1, 而 在 集合 {т=п} Е, 有 
ет 


5) [en a} 
= УЕ |е" ры) — 1| < B < оо, 


一 1 





Еру, УИ, = vef 








其 中 B 是 某 一 常数 . РЕ, 由 于 ЕУ, =1, 故 由 定理 2, 4 (15) <. 口 
Я: ”这 个 例子 在 于 演示 , 将 上 述 结果 用 于 博弈 问题 , 包括 求 破产 概率 和 平均 
МАНИ ( 见 第 一 章 89). 
设 &1,€2,… 是 独立 伯 努 利 随机 变量 序列 : P{&; = 1} = р,Р{& = -1] = g p+ = 
1,0 Sn =& + +, В 


T =inf{n > 1: Sn = B 8 А}, (16) 


其 中 (-4) 和 В 是 正 整数 . 
由 第 一 章 89 的 (20) 式 可 见 ，P{r < оо) = 1 和 Er < œ. 那么, 如 果 a = 
P{S; = A}, 8 = Р{5, = B}, 则 a+B=1, 并 且 当 p=4=1/2 时 ,由 (13) 式 ,可见 


0= ES, =aA+BB, 


因此 
-2 в= 14 
B+ “ В+|АГ 








利用 (14) 式 , 得 
Ет = ES? = аА? + ВВ? = |АВ|. 


ЛЕНИ ра, WA, EHE (a/p) )n>1 №, 则 可 得 


因此 


由 此 连同 等 式 e+ 8 = 1 ,得 


)- Р 
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注意 到 ES, = (p - 4)Ет, 最 后 得 


ЖУ _ аА+ ВВ 


_ ES, 
р-9 р-9 ° 





其 中 a 和 6 由 (17) RRE. 
#2 假设 在 例 1 中 p=g=1/2. 证 明 , 对 于 任意 0 < 入 < r/(B+|4|) 和 由 
(16) 式 决定 的 停 时 7， 


В+А 
为 此 , BER X = (Xn, F Оно, 其 中 
Xn = (cosA)-" сов h (5, = Е) $ (19) 
而 So = 0. 显然 
ЕХ, = EXo = Ecos (===) ， (20) 


现在 证 明 , 变量 族 {Xnr} 一 致 可 积 . 为 此 注意 到 ,由 于 定理 1 的 系 1, 对 于 任意 
0 <À < 7/(B + |А), 有 


EXo = EXnar = E(cos А) ("^") cos р (sw 三 9) 


> E(cos А) ("7") сов (252) . 


因此 , 由 (20) 式 , 可 见 


соз (2234 
Е(сов А) ^^, 
cos (=) 
故 根据 法 图 引 理 , 有 ӨЙ 
ip 
入 一 一 一 一 
E(cos\)-" < аа (21) 
сов | 入 一 一 一 
2 
从 而 , 根据 (19) 式 


|XnAr| = (сов А)”, 
ВОЕН (21) 式 便 证 明了 变量 族 {Xn} 一 致 可 积 . 那么 , 由 定理 1 的 系 2, 可 见 
cos ==) = EXo = EX, = E(cos À)" cos (252) З 


于 是 , 等 式 (18) 得 证 . 
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4. 更 新 理论 的 基本 定理 ”作为 瓦尔 德 恒 等 式 (13) 的 一 种 应 用 , 我 们 证 明 更 新 
理论 的 所 谓 基 本 定理 : WR М = (№) оо 是 更 新 过 程 , 其 中 


№= У ит, <, Ta = 01+: +9, 
п=1 
而 01,02,… 是 独立 同 分 布 正 值 随机 变量 序列 ( 见 第 二 章 89 第 4 小 节 ), и = Ес: < 
оо, 则 更 新 函数 m(t) = EN, 具有 如 下 性 质 : 
m(t) _ 1 
рд" 
回忆 , 过 程 N = (№) ьо 本 身 服从 强大 数 定律 : 


t 一 оо. (22) 


№ > lp — а.с.), t— оо. 
t и 


(例如 , 参见 第 四 章 83 的 例 4.) 
为 证 明 (22) 式 , 只 需 证 明 


lim Тя 01, 
да ?р "Ду СҮЙ 


为 此 , 注意 到 
Ты, Ct< Tmj E> O: (24) 


因为 对 于 任意 n >1, 
{№ +1 ки = М єл} {ш <=} {у >и} = {усе >} е9, 
k=1 


其 中 多 ,是 由 变量 01,02,… 诱导 的 o- КЖ, и = Ест < оо, 则 (对 于 每 一 个 固定 
的 上 + > 0) 时 刻 М, + 1 (但 不 是 N,) 是 马尔 可 夫 时 间 . 那么 , 由 瓦尔 德 恒 等 式 (13), 可 
以 得 到 

ETw,+1 = plm(t) +1], (25) 


因此 , 由 (24) 式 的 第 一 个 不 等 式 , 得 
t<plm(t)+1]J， 即 > (26) 


故 当 上 一 co 时 得 (23) 式 的 第 一 个 不 等 式 . 
其 次 , 由 不 等 式 (24) 的 右 侧 可 见 , t > ETw,. 由 于 Ты, +1 = Тм, +ом,+1, № 


t > ЕТу, = Е(Тм,+1 — ом+1) = pm(t) + 1] — Eon, +1- (27) 
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如 果 假设 变量 都 有 上 界 (ci < с), MH (27) 得 上 > umg) +1) - с, 因而 
ЕЙ, (28) 


ЖА, 由 此 得 (23) 式 得 第 二 个 不 等 式 . 
为 去 掉 限 制 o; < c,i > 1, 对 于 某 一 c > 0, 引进 变量 





оў = oil (o; < c) + cI (o; > c), 


并 且 将 其 与 更 新 过 程 Ne = (Мо 相 联系 , 其 中 


Ne= Ўлат <®), Т = 06 +... +0. 
п=1 
由 于 of < a(i > 1), № > №, 因而 me(t) = ENF > ЕМ, = m(t). 那么 , 由 (28) 
式 可 见 
mit) < те стс 
t ^ t `p мо‘ 
其 中 pe = Eof. 
从 而 
t>o Ё р" 
MER c оо, 并 考虑 到 当 c оо 时 u 一 и, 由 此 得 (23) 式 得 第 二 个 不 等 式 . 
于 是 , 性 质 (22) 得 证 . 
注 关于 更 新 理论 更 一 般 的 结果 , 例如 , 可 以 参见 [7, 第 9 章 ],|69, #1, 第 ХШ 
章 ]. 
5. 练习 题 
1. 对 于 下 款 的 情形 , 证 明 , 如 果 将 条 件 (4) 换 成 条 件 
lim X+dP =0, 
n= /{т2>т} 
则 定理 1 仍然 成 立 . 
2. 设 X = (Xn, F „)„>о 是 平方 可 积 拷 ,7 是 停 时 , EXo = 0, 
lim X2dP = 0. 


mn 一 co J {n>n} 
证 明 
EX? = E(X); (- вау) ` 
j=0 


其 中 AXo = Xo, АХ, = Xj - Xj- j >1. 


$2. 在 时 间 变量 为 随机 时 间 时 著 性 的 不 变性 - 131. 





3. 证 明 , ЯРА А X = (Х,а) хо БЕЙТ, 以 及 停 时 r, 有 
вх. < lim ЕХ. 


4. 设 X = (Хи, Я n)nz0 ЗН Е, 1E Xn > EEF n)(P 一 a.c.),n 之 0, 其 
中 Е|&| < оо. 证 明 , WR т, 和 то 是 停 时 , Н Par < т) =1, Д0 


Xn > E(Xn|F n) (Р-ас). 


5. Ва, =»... 是 独立 同 分 布 随机 变量 序列 , 且 Р{& = 1) = P{&i = -1} = 1/2, 
而 a 和 Mb > а) 是 正 数 ， 


和 =ay IE =+1) -bd IE = -1), 
k=1 k=1 
而 


T=inffn>1:Xn <-r}, г>0. 
证 明 : 当 入 < ao 时 , Ее?” < оо, 而 当 А > ао №, Бел” = оо, 其 中 
bn 
a+b a+b a+b a+b 
6. 设 &1,62,… 是 独立 同 分 布 随机 变量 序列 , Н ЕЕ, = 0, DE = 0?, Sn = & 
++, = oln En). 对 于 推广 瓦尔 德 恒等式 (13) 和 (14), 证 明 如 下 论断 
WERE: ， 
1) WR E > ЕЕ < оо, M ES, = 0; 
E 


ao 





2) ШЖ ЕУ] Бе? < оо, 则 
= 


ве - ву E =EY 0 (29) 
j=1 


j=1 
7. BX = (Xm F „)„> АТМ, 而 т 是 停 时 . 证 明 


EX? < ED (AXn)2. 


п=1 
证 明 , 如 果 
lim Е[Х2Цт > п) < © & limEIIXnlIr>m=0， 


则 А 
Е(АХ,? =E} X}. 


n=1 
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8. 设 X = (Xn, F п), Ж ЕЮ, 而 对 于 停 时 < то < … ЕХ, 有 定义 . 证明 
lim Е[ХЯ (Tm > п)] =0, т>1. 
证 明 序列 (Xr F )трь Ж ЕЙ (ШЖ Я. = {АЕ : АГ т = ДЕЯ jj 
1р. 
83. 一 些 基本 不 等 式 


1. 概率 的 最 大 不 等 式 和 17 中 的 最 大 不 等 式 ” 如 果 X= (X,.Fn)n>o 是 随机 
序列 ， 
Xa = max [Xl, Хы» = (ЕХ), р>0. 


о<у<п 


下 面 是 属于 杜 布 的 三 个 定理 : 定理 1 一 定理 3 . REER, РР ТЕК. LRA 
B 给 出 了 基本 的 “概率 的 最 大 不 等 式 ” 和 “ Lr 中 的 最 大 不 等 式 ”. 
定理 1 LHX = (Xn Fn) ЖТЖ, 则 对 于 任意 入 > 0, 有 


AP [а > } < <Е [хи (хх, > ›)| < EX+, (1) 
<n 
AP [minx < ә} <Е [хы (вах > -a)] -EX SEX} -EXo, (2) 
<n п 
АР (вахы > a} < 3шахЕ|Х|. (3) 


П. ЖУ= (Yn, Я п) про ЖЕК, 则 对 于 任意 入 > 0， 有 


AP [паки >A} < Е% -B [yat (вики <) < EY + EY; , (4) 
АР {ави < ә} <-Е ы (ви < -a)] < EY; (5) 

к<п к<п 
AP fmax iyl >A} < 3max EJN]. (6) 


Ш. it X = (Xn Я n)nz0 ЖАРА ЕЯ, 则 对 于 任意 入 > 0, 有 
АР {ne > a} < EYo, (7) 
АР {ыру > a} < ЕҮ,. (8) 
kèn 


定理 2 ЖХ = (Xn, 多 n)n>o FATH, 则 对 于 任意 卫 > l, 下 列 不 等 式 成 
3ї: 
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如 果 p>1, 则 А 
х1 < 1 < ПХ! (9) 


如 果 D 一 1 则 
ПВ < Wl < с^ + Xn Int хы). ао) 


定理 3 设 怀 =(Xn, 多 n)n>o Ж, 而 入 > 0,р>1, Я 





р 
P [pax ixa] >л} < ©рт. (11) 

而 如 果 p>1, 则 
Хы» < ИХ < 1А. (12) 

特别 , 5 р=2 时 , 有 

2 

P [вах > a} < Эг, a3) 
E [вх] < 4Е|Х„|?. (14) 


证 明定 理 1 由 于 带 相反 符号 的 下 拷 是 上 拷 ， 故 由 不 等 式 (4)~(6) 得 不 等 式 
(1)~(3). 因此 , RIEBER Y = (Yn, F „)„»» 的 情形 . 

Я r = inf{k < n : Yk > A}, 如 果 max Yk < А, 则 认为 7 = п. ЖА, 由 82 性 质 
(6) 可 见 ， 


EY, > EY, = Е и > a] +E [par < al 
> АР 52 >a] +E 2 < | $ 
ksn к<п 


从 而 , 证 明了 (4) 式 . 
ME, Яо = inf{k < n : Yy < 一 和 }, ШЖ шах > -入 МАЯ с=п. ЖА, 仍 
Жин 82 性 质 (6) 可 见 ， 


ЕҮ, < EY, = Е ШО < > +Е [ipar > > 
кп ken 
$ -АР [гв Yk < > +Е [rai piar, > > > 


由 此 , 得 
АР [ш < > <-Е уши < > <ЕҮ;, 


从 而 , 证 明了 (5) <. 
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为 证 明 不 等 式 (6), 注意 到 Y- = (-У)+ Ж Т, 从 而 根据 (4) RA (1) 式 , 有 
АР [реу > я < АР ESA > | +AP [pay > | 
= АР [паки > a} +AP а > a} 
< Е% + 2EY; < 3 max Е|У |. 
由 (4) RATER (т). 
为 证 明 不 等 式 (8), WRH k >n У, <А, Ш y = inf{k > n : Үк >A}, 认为 
у= о. Хп < М < о. ЖА, h 82 (6) R, 有 
ЕУ, > EYyaw > ВУ лм < N)] > AP{7 < N}, 
ТЖ, 当 N оо 时 , 得 


ЕУ, > AP{Y < оо} = АР {ыу > n} р О 
к>п 


证 明定 理 2 (9) АЖ (10) 式 的 前 两 个 不 等 式 显然 . 
为 证 明 (9) 式 的 后 两 个 不 等 式 , 先 假设 


ИХ < оо, (15) 
并 且 利用 如 下 事实 : 对 于 任意 非 负 随机 变量 5 和 > > 0, 有 
r-l 
ЕЕ =r f tIP{E > t}dt. (16) 
ЖА, 对 于 р> 1, 由 不 等 式 (1) 和 傅 比 尼 (G. Fubini) 定理 , 可 见 


ос оо 
E(X*)? = rf tP-IP{X} > t}dt < rf 0-2 (/ хы) 4 
0 0 {Х >} 


© х; 
= gi 2 у ХХ} > nar] dt =r f SE, Г а ар 
0 а а 0 


р *үр- 
„ко! пт) 


从 而 , 根据 赫 尔 德 (90. L. H6lder) 不 等 式 (第 二 章 86 第 7 小 节 ), 有 
Е(ХД)Р < qlXnlls ПОС) = «ПХ ЕХ), (18) 


ЖР q = р/(р - 1). 
假如 不 等 式 (15) 成 立 , 则 由 (18) 式 立 即 得 到 (9) 式 的 第 二 个 不 等 式 . 
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假如 不 等 式 (15) 不 成 立 , 则 应 该 按 如 下 方式 操作 . 在 (17) 式 中 不 是 考虑 Xx 而 
是 考虑 变量 (X* L), 其 中 工 是 某 一 常数 . 那么 ,有 > 


Е(Х; A L)? «ЧЕХ» (Ха A ЕР < ХЕС A ЕР, 
因此 , 由 不 等 式 E(X} A L)? < ІР < co 可 见 
E(X} A L)? < PEX; =? Хо, 


从 而 
ЕХ = Jim E(X; A L}? = Хы. 
现在 证 明 (10) 式 的 第 二 个 不 等 式 . 
仍然 利用 (1) 式 , 有 


ЕХ -1<Е(Х]-1)* = [ P{X} -1> t}dt 
0 


co 1 MG-1 а 
<| 一 ар| а= At вх. nX. 
/ тї ла t Ех, | Т1 = ВХ, nX; 
由 于 对 于 任何 a>0 和 b>0, 有 
alnb < alnt а + be-!, (19) 
因此 
ЕХ; -1 < EXn ln X} < ЕХ, ш? Xn +е-!ЕХ]. 


如 果 ЕХ; < оо, 则 由 此 立即 得 (10) 式 的 第 二 个 不 等 式 . 

如 果 ЕХ; = оо, 则 像 上 面 一 样 将 Xr RR Xa AL. | 

证 明定 理 3 由 于 (#Е|Х|Р < oo,n > 0) |XiP(p > 1) ЗЕ ТР, 故 由 (1) 式 
和 (9) 式 可 见 定理 3 成 立 . 

定理 3 的 系 ЖХ,-&+-.--+6т>20, 其 中 (5k)k20 是 独立 随机 变量 序列 ， 
Н. EE =0, ЕЁ < оо. ЖА, 不等式 (13) 就 是 柯 尔 莫 苞 洛 夫 不 等 式 (第 四 章 $2). 

2. 最 大 概率 及 L 中 最 大 范 数 的 估计 式 、 设 六 = (Xn F n) АЗРА ТА, 而 


Xn = Mn + An 
是 杜 布 分 解 (31 的 (11) 式 ) ЖА, 由 于 ЕМ, = о, 故 由 (1) 式 可 见 
Р(Х; >=} < вА. 


下 面 的 定理 4 ЕВНА ВАЗ, 而 且 对 于 控制 性 的 更 广泛 的 一 
类 序列 成 立 . 下 面 的 定义 说 明了 这 里 所 谓 控制 性 (优势 性 ) МАХ. 


- 136 - 第 七 章 “构成 鞠 的 随机 变量 序列 





定义 设 X= (Xn Fn) 是 某 一 非 负 随 机 序列 , 而 4 = (An F n1) 是 一 递增 可 
预测 序列 . 称 序列 4 控制 序列 X (或 4 是 X 的 优势 序列 ), 如 果 对 于 任何 停 时 т, 有 


ЕХ, < ЕА,. (20) 


定理 4 设 4= (4n, 罗 -1) 是 一 递增 可 预测 序列 , 而 X = (Х„,5„) 是 被 序 
Я] А 控制 的 非 负 随 机 序列 , ЖА, 对 于 入 > 0,a > 0 АН т, ж. 


P{X} >} < кА, (21) 

P(X; > A} < Е(А, Ла) +Р(А, >а}, (22) 
2-р\\? z 

ведь < ($2) дь, о<р<ь (23) 


证 明 设 
on = min{j STAN: Xj > А}, 


而 车 {+} = 0, 则 认为 о„=тлп. 那么， 


БА, > BAe, > Ex。. > | XusdP> АРХ; > Л}, 
{Х„>^} 


因而 i 
P{X2An > A} < хЁА+› 


于 是 , 由 法 图 引 理 可 得 不 等 式 (21). 
为 证 明 (22) 式 , 引进 时 间 


у= шј: А; >а}, 
ШЖ {} = 2, 则 认为 = о. ЖА, 
Р{Х} >A} = Р(Х; > АА, <а}+Р{Х; > АА, >а} 
<Р{ЦА, <a} X} >А}+Р{А, > a} < P{X}n >^}+Р{А, >а} 
< УВА, +Р{А, >а} < iea, ла) +Р{А, >а}, 


其 中 用 到 不 等 式 (21) 和 I(4,<o}X? < Xtar 最 后 (注意 到 (22) R), 由 下 面 的 一 系 
列 关 系 式 , 得 不 等 式 (23): 


оо оо 
хи = E(X?)? = f Р{(Х;) > t}dt = J РХ; > 2/7} а 
ЫР, ч со 
<f ЕА, лата | Р{А? > t}dt 
0 0 


А? < 2-р 
=Е Í #+Е f Ал +ЕХР=Т—РЕХР 0 
0 АЎ = 
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Ж 假设 定理 4 的 条 件 成 立 , 但 序列 А = (А, Я n>0) 未 必 是 可 预测 的 , 不 过 假 
定 对 于 某 个 常数 c> 0, 有 


P{aslaal< 中 = 
其 中 A4k = Ar - Ар. ЖА, 如 下 不 等 式 成 立 (对 照 (22) 式 ): 
Р(Х; > A} < ТЕА, A (a + c)] + Р{А, >а}. (24) 

这 一 事实 证 明 与 不 等 式 (22) 的 证 明 类 似 , 只 需要 把 时 间 у = inf{j : Аун >а} 
换 成 时 间 y = inf{j : Aj > а}, 并 且 注 意 到 А, <а+с 

Я их (XE, FE) № АЁ = (4*,9*),п>20,К 21, ЖАНА, R 
者 满足 上 面 的 注 . 假设 (T) 关于 ОУ” = (Fk) 是 停 时 序列 ,而且 AK Р,0, 那么 
(х), о. 

з. RATER ”在 这 一 小 节 将 (不 加 证 明 , 但 是 有 其 应 用 ) 列举 一 系列 非常 好 
МЖК. 这 些 不 等 式 , 有 些 是 下 面 的 介绍 的 辛 钛 不 等 式 的 推广 , 有 些 是 独立 随 
э, Ж 24е Л, ЖЮ (J. Matcinkiewicz) 和 齐 格 蒙特 (А. Zygmund) 不 等 式 的 
推广 . 

ERRER 设 61,62,… 是 独立 同 分 布 伯 努 利 随机 变量 , 且 Р = 1} = 
Р{& = -1} = 1/2. 而 (cn)n>l 是 一 数列 . 

ЖА, 对 于 任意 0 < 了 < 1 存在 (不 依赖 于 (cn) 的 ) 通用 常数 Ap 和 Вр, 使 得 对 
于 任意 n>1, 有 

Ус 


> 1/2 m 1/2 
Ap (> 4) < <B, (> 4) . (25) 
j=! j=1 Р jmi 


马尔 钦 凯 维 奇 和 齐 格 蒙特 不 等 式 ха, 是 独立 可 积 随机 变量 序列 ， 且 
EG = 0, 则 对 于 任意 卫 > 1, 存在 这 样 的 (不 依赖 于 (En) 的 ) 通用 常数 hp 和 Bp, 使 


得 对 于 任意 >1, 有 
f 1/2 
j=l 


7 1/2 
(È) 
і=1 
р 
在 不 等 式 (25) 和 (26) 中 , 序列 X = (Xn) Ж, 其 中 相应 地 
Xn= 06 和 Х„=ў бу. 
= ј=1 


自然 地 提出 问题 , 是 否 可 以 将 这 些 不 等 式 推广 到 任意 闭 ? 在 此 方向 上 最 早 的 结果 属 
FAHER (D. L. Burkholder). 














РЭ 


=! 


Ар < <В, 


р 


(26) 






































р 
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HARRER wR Хх = (Xn, 多 。) ER, 则 对 于 任意 p > 1, 存在 这 样 的 
(不 依赖 于 X 的 ) 通用 常数 A 和 Bp 使 得 对 于 任意 n 之 1, 有 


АМ], < Xalo < в» Х|, en 
其 中 [Xln 表示 Xn 的 二 次 变 差 (第 118 K), 


[Xh = (AX Xo=0. (28) 
j=i 
特别 , 常数 4p 和 В, TARA 
Ар = [18р3/2/(р-1)]7® 和 В„=18р°/?/(р-1)!?. 
ЖЗ! (12) 式 , 由 (27) 式 可 见 


[7], < їхд\„ < в; 








Ух, (29) 


其 中 
А, = [18р2/2/(р – 1)]-1 和 В; = 18p"/?/(p — 1)3/2. 
当 р> 1 时 , 伯 克 土 尔 德 不 等 式 (27) 成 立 ; 而 且 马 尔 钦 凯 维 奇 和 齐 格 蒙特 不 等 
式 (26), 也 对 于 р = 1 RX. 问 对 于 р = 1 不 等 式 (27) 是 否 成 立 ? 下 面 的 例子 表明 ， 
当 p = !1 时 , 不 等 式 (27) 不 能 直接 推广 . 
М 设 &1,&2,… 是 独立 伯 努 利 随机 变量 , 而 P{é&; = 1} =Р{& = -1} = 1/2, В. 


х, = Ў, 其 中 -> 站 
j=1 j=1 
序列 X = (Xn Я n) 是 对 ,其 中 
| 1.1: = Е|Х„|=2ЕХ} > 2, n> oo. 
但 是 


j=1 


йе 1/2 
МИ, = ИМ, = Е (к ) = EVTAT > о. 
ММ, (27) 式 的 第 一 个 不 等 式 不 成 立 . 
结果 表明 , 对 于 р = 1 的 情形 , 虽然 不 等 式 (27) 不 能 推广 , 然而 (对 于 p > 1, 与 
不 等 式 (27) 等 价 的 ) 不 等 式 (29) 可 以 推广 . 
REN (H. T. Davis) RER 如 果 X =(Х„,#„) ЖА, 则 存在 这 样 的 通用 
常数 A4 和 B(0<A<B<o0), 使 


а |5], «х |0). (80) 


33. 一 些 基本 不 等 式 - 139. 


АЕ Ах <Е [РЗ xa] < ВЕ ZAX). 


Я! Bénin 是 独立 同 分 布 随 机 变量 , Sn =а ttin 如 果 ЕЕ < 
оо, Её: = 0, 则 根据 82 中 瓦尔 德 不 等 式 (13), 对 于 任意 (关于 (9 的 ) 停 时 T(T < 
оо), 如 下 等 式 成 立 : 





ES, = 0. (31) 

如 果 补 充 假设 ЕЕ!" < оо(1 < т < 2), 则 等 式 ES, = 0 成 立 的 充分 条 件 是 
Ет\/" < оо. 

为 证 明 系 1 的 结论 , 引进 记号 : m = rAmY = вир|5,, |, HEBR t > 0, т = [t"] 


是 tr 的 整数 部 分 . 由 于 82 定理 1 的 系 1 TA ES, = 0. 因此 , AXAR ES, =0 
RY, (根据 控制 收敛 定理 ) 只 需 验证 Езир |5, | < оо. 


由 不 等 式 (1) 和 (27), 有 
P{Y >t}=P{r2t,Y >t}+P{r <t",Y >t} 


< P(r 2 г}+Р{ max |S, >t} < Pir >E) + 


7/2 
<Р{т>г}+ "ВЕ (že) < P{r >t} +Ё "ВЕ У е". 


j=1 3=1 


注意 到 , ( 记 # = {2,0}) 





ЕУ = 510 <) = Уве <) |F $-a] 
j=1 3=1 


j=1 
оо Tm 
=Е> IG < Tm)E [61751] = ЕЕ = Ет, 
j=1 j=1 
其 中 pr = ВЕ". 因此 ， 
P{Y >t} < P{r >t} +t" Bih Erm 
= P{r > t} +В ш" ee 2#}+ rar] 
{т<} 


< (1+ Brpnr)P{rzt + врат" | тір, 
{т<} 
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тй, 


m 3 
EY = [ P{Y >а < (1+ В.) + Ви, f С" | / rar] dt 
0 0 {r<tr} 


= (1+ Втр, )ЕтМ т + в, | т Г. с") ар 
а Tr 
r 
= (1+ Bru + FEE) ве" < oo. 


A2 &М=(М„) 4%, 满足 条 件 : 对 于 某 一 > > 1 了 Mn|2r < оо, Н. 





оо 2r 
у БАМ” < оо, (Мо = 0). 


TFr 
mi п 


ЖА, 强大 数 定律 成 立 (对 照 第 四 章 83 定理 2): 


М э (Р-ас.), п-+ оо. 


(32) 


(33) 


当 r = 1 时, (32) 式 的 证 明 与 第 四 章 83 定理 2 的 证 明 方法 一 样 . 具体 地 说 , 设 


n 
АМ, 
"= Ам. 
k=l 
那么 
n 
ù LAM: а 
= 
n n 2 У: FAm, 


k=l 


而 根据 克 罗 内 克 引 理 (第 四 章 53), 级 数 收敛 (P — а.с.) 


n 
1Y kam, 一 0， п — оо, 
"1 


的 充分 条 件 是 , 存在 有 限 极限 limma(P -ae). 而 极限 limma(P — в.с) 存在 , 当 且 


仅 当 对 于 任意 = > 0 (第 二 章 810 定理 1 和 定理 4), 有 
P fup masa —т»| >e} —0, пәоо. 


由 于 不 等 式 (1), 有 





Р {е Imntk — Mnl > e} < 
>21 


从 而 , 24 т = 1 时 , (32) 式 和 (34) 式 得 证 . 


4 BAM 


(34) 


$3. 一 些 基 本 不 等 式 м1. 





现在 假设 r > 1. 由 第 二 章 $10 定理 1, 可 见 关系 式 (33) 等 价 于 : 对 于 任意 > 0, 
E2r 卫 {р Е > e} —0, n=. (35) 


由 下 面 (第 7 小 节 ) 练习 题 1 的 不 等 式 (52), 可 见 
ер {sup Hl >e} = =" lim P{ тах Ім >er} 


jn moo (ат j? 
1 1 
< ЕМА" + У gr PUM; — |M;-11"). 
jžn+1 
由 克 罗 内 克 引 理 , 可 得 i 
lim ам," =0. 


mm 一 co N27 
从 而 , 为 证 明 (35) 式 只 需 验 证 
55 уем” —-\мМ;-1[) < оо. (36) 
了 
易 见 , 有 
r 1 
In = У ему” -EM 
j=2 
3 1 1 EMw|2r 
У = = 去 | вум" + МН, 


ШЇ ЗЛЕ ЛКЛЕЛ&Җ (27) RARE (O. L. H5lder) FER, 可 见 


i K 3 
EIM;l” < ВЕ рам < ВЕ) (Ам;)”'. 


i=l i=1 


11 Т >» Е|Мм|?” 
yz GF а 2 лм! №" 





1 j N r 
хо У) 2 Dram p ЕМ? <<) ЕАМ Р о. 
j=2 1 i=l j=2 了 
其 中 Ci(i = 1,2,3) 是 常数 . 于 是 , 由 于 (32) А, 估计 式 (36) 得 证 . 

а. 下 著 的 极限 平均 “振动 ”次 数 的 上 界 ”随机 变量 序列 (Xn)w>1 以 概率 1 有 
(有 限 或 无 限 ) 极限 lim Х„, 当 且 仅 当 “在 任意 两 个 (有 理 ) Ж а 和 Ma < b) 之 间 振动 
的 ”次 数 以 概率 1 AR AFTA, 下 面 的 定理 5 给 出 了 “振动 的 ” 平均 次 数 这 上 侧 
估计 , 定理 5 将 用 来 证 明 其 收敛 性 的 基本 结果 . 
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固定 两 个 (Ж) Жа 和 Ma < Б), 并 且 对 于 序列 X = (Хи, 定义 停 时 : 
ту = 0, 
т = min{n > 0: Xn < а}, 


т = min{n > 7: Xn >b}, 





Taom-1 = min{n > T2m-2 : Xn < а}, 


тт = min{n > Tam-1 : Xn > b}, 


车 相应 的 集合 {.} EZR, 则 设 т, = оо. 
其 次 , 对 于 每 一 个 n > 1, 定义 随机 变量 


0, Ж т2 > п, 
ноя а Ж т < п. 
随机 变量 Anla, b) 的 含义 是 : 序列 Xi, Xn 与 区 间 [a,b] ( 自 下 而 上 ) 相交 的 
次 数 . 
定理 5 ( 杜 布 ) = (Х,,9,) ЯР. 那么 ,对 于 任意 nn 之 1, 有 
ЕХ, — ај+ 
b-a ` 
证 明 СЕЙ X = (Xn In) 与 区 间 (0,0) 相交 的 次 数 ,等 于 非 负 下 款 X+ = 
(Xa - а)+,.#„) 与 区 间 [0,5 — а] 相交 的 次 数 . 因此 , ТЯНЕТ х 视 为 非 负 的 且 
a = 0, 则 需要 证 明 


Efn(a,b) < (37) 





вв, (0,5) < ВХ". (з) 


设 Xo =0, В = {2,9}, 而 对 于 i= 1,2,... 和 某 个 数 m, 记 


ХА, 1, Ë m< iS таф Н т 为 奇数 ， 
к 0, #7. <i< Tm Вт 为 偶数 . 
不 难看 到 ， 
58„(0,5) < pilXi — Xi-1l 


+= 


{pi=1}= U Ктһ < (тъ < iH E Fii 
т 为 奇数 
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从 而 


ЕВ, (0,5) «ЕУ -= >] (Xi— Хар 
i=l i=1 {w=1} 


n 


Е B(X: Жар = А 
ЭГЕ ( lf i-1)dP У fp P 1)- Xi-1]dP 


i=l 


<> Јеси) – хла = Ex 
于 是 , 不 等 式 (38) 得 证 . 口 
5. 二 次 可 积 鞭 大 偏差 概率 的 估计 “在 这 一 小 节 对 于 平方 可 积 默 , 我 们 将 讨论 大 
偏差 概率 的 不 等 式 的 某 些 简单 不 等 式 . 
设 М = (М, Я n)nzo 是 平方 可 积 蔷 ,而 (М) = ((M)n, F „-1), Mo = 0 是 其 二 
次 特征 . 如 果 将 不 等 式 (22) 用 于 Xn = М2, An = (M)n, 则 对 于 a > 0,Ь > 0, 得 


Р {вама > an} =P {pax м: > (an)? } 
1 


< {алу 





E[(M)n A (bn)] + P {(M)n > an}. (39) 


事实 上 , 利用 第 四 章 85, 在 估计 独立 同 分 布 随机 变量 之 和 的 、 大 偏差 概率 的 估计 时 ， 
所 阑 述 的 思想 , 至 少 当 |AMn| < C 时 , 对 于 一 切 m 和 ш є 9, 可 以 本 质 上 改进 该 不 

等 式 . 
注意 ， 在 第 四 章 85 中 推导 相应 的 不 等 式 时 ， 这 样 的 环节 是 利用 了 如 下 事实 : 

序列 
(>S AN, F a)na Fn = oln ,én), (40) 
形成 非 负 装 , 然后 再 对 其 运用 本 节 的 不 等 式 (8). 如 果 现 在 将 Sn 取 作 Mn, 则 与 (40) 

ЕЕ EHER 
(е^ E n(A), 8) ә, 

其 中 

Eal) = ПЕ (е^2М›#,_,) (41) 
j=1 


是 所 谓 随机 分 量 ( 亦 见 第 二 章 86 第 13 М). 

这 一 表达 式 相当 复杂 然而 , 为 使 所 形成 的 序列 是 凌 , 完全 没有 必要 利用 不 
等 式 (8)， 只 需 使 它 形成 非 负 上 装 、 我们 在 这 里 也 正 是 这 样 做 的 首先 构造 序列 
(2„(^), Fn) ( 见 下 面 的 (43) К), 然后 运用 第 四 章 85 使 用 的 方法 . 
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引 理 1 设 Mf = (Ar 多。)n>o 是 二 次 可 积 闭 , Mo = 0,AMo = 0, 而 对 于 一 切 
п № о, |АМ, (и) < с. 假设 对 于 入 > 0, 有 


ел —1— Ас ер 
а т’. (42) 
a c <0, 
>, <0, 
而 
Zn(N) = OM) (43) 


д, 对 于 每 一 个 c> 0, А-Я 2(А) = (Zal), F .)а>о AEA LR. 
证 明 对 于 |z| <с 


№ — 1— Аш = (= УУ on < (zy бәс < 274 (Л). 
т>2 и т>2 ы 


由 于 该 不 等 式 以 及 表达 式 (Za = 2.) 


А2„ = 2„—А[(е^2М* — 1)е А0900) + (6-м. 1), 


Е(А2„\Ў „-1) 
= Ж„-1[Е(е^2М° 9 )е А0090) + (ета) _ 1] 
АА 2„-1[Е(е^^М” н, ы АМ, Я „_1)е- АМ) + (eTA Mnt) -1)) 
«ЕАМ, m1)e А0090) +. (7AM - ту) 
= Zn_ilbe NA(M)ne- АМ). О) + (е-А4(М)»%е 0) _ 1)] < 0, (44) 


其 中 亦 用 到 如 下 不 等 式 : 对 于 z > 0, 有 
те? + (е7 — 1) <0. 


由 (44) 式 可 见 
E(Zn|F n-1) < 2„-1, 


即 Z(A) = (2.(^),Я n) ЖЕФ. о 
假设 满足 引 理 1 的 条 件 . ЖА, 总 存在 和 > 0, 使 (对 于 给 定 的 a。> 0,Ь > 0), 有 . 





53. 一 些 基 本 不 等 式 - 145. 





вл 一 bwe( 和 A) > 0. 由 此 , 可 见 
Р = AM; an 
(ем, >an} P (ае k > eò } 
<Р {рак елми. ОАА > гозо.) 
kín 


=P 人 ОМ)» > anp (00м) (М), < n} 


+P {раке едим» > елаъ-Фе (М). (М), > nb) 


<P {px EMM Ом)» > о +P {(M}n > bn} 
< e-"Da-bWN] рМ), > т}, (45) 


其 中 由 (7) 式 得 最 后 一 个 不 等 式 . 
за (对 照 第 四 章 85 的 函数 H(a)) 


H.(a,b) = sup[Xa — bye(N)]. 
A>0 
那么 , 由 (45) 式 可 见 


Р (вем, > an} <Р{(М)„ > bn} + е-®Н-@5. (46) 


HM 换 成 -M 可 见 , 不 等 式 (46) 的 右 侧 也 从 上 侧 估 计 概率 P {pam < -on}. 
因此 ， 
Р {рымы > an} < 2P {(M)n > т} + 2677-2), (47) 


于 是 , 证 明了 如 下 定理 . 

定理 6 &М=(М,,Я,) 是 具有 一 致 有 界 跃 度 的 鞭 , 即 对 于 某 个 常数 c > 0 
以 及 一 切 n 和 ww,|AMn(w)| < с. ЖА, 对 于 任意 a > 0,b > 0, 不 等 式 (46) 和 (47) 
RÈ. 

Ж 函数 


Нов) = 1 (2+2) (+) -4. (48) 


6. 二 次 可 积 著 与 其 二 次 特征 最 大 比值 概率 的 估计 在 定理 6 的 条 件 下 , 我 们 现 
在 考虑 形 如 РЕ 
k 
S fæ му» > o} 
的 概率 的 估计 问题. 特别 , 这 种 形式 的 概率 , ЕЗЕР ЖЕСЕНЕР (下 面 见 $5 的 
定理 4), 表征 收敛 的 速度 . 
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由 与 第 四 章 §5 同样 的 方法 , 可 见 对 于 任意 a > 0, 存在 入 > 0, {E a- plà) > 0. 
那么 , 对 于 任意 b> 0, 有 








Р {зар Me: 、 a} <P {pew on eve} 
kən (М)к к>п 
<Р {гь еМ 9-0 > ЕН] +Р{(М)„ < №} 

kèn 

< em + P{(M)n < bn}. (49) 
由 此 , 得 
P {гр м > a} <Р{(М)„ < bn} +e7™H-(abb), 60) 
kən (М)ь 
P {зар Му | > a) < 2P {(М), < bn} + 2е "н, (51) 
куп | (М) 





于 是 , 证 明了 下 面 的 定理 . 

ЖЕТ 假设 满足 定理 6 的 条 件 , 则 对 于 任意 a > 0,b > 0, 不 等 式 (50) 和 (51) 
成 立 . 

Ж 将 (51) 式 的 估计 , 与 第 四 章 85 中 的 (21) RER, 其 中 对 于 伯 努 利 概 型 : 
р = 1/2, Mn = Sn -п/2,6 = 1/4,с = 1/2, 则 可 以 看 到 当 є > 0 二 者 产生 同样 的 结果 : 


> e} = P {sup 502 > £} <27, 
kèn k 4 
7. 练习 题 


1. Х = (Xn F n) ЖЕТ, У = (VnF n1) 是 可 预测 序列 , 其 中 以 概率 
1, 有 0< Wri< И, < С, С 是 常数 ,证 明 不 等 式 (1) 有 如 下 推广 : 


Mk 
(М), 














Р {гр 
к2п 


Ху > VaXndP < АХ. 2 
Р {аи > e} t алад $ EA e 
2. 证 明 克 里 克 伯 格 (Krickbeg) #9: ЧЕН Х = (Xn, F n), 只 要 sup E| Xn] < 
со, 都 可 以 表示 为 两 个 非 负 蔷 之 差 . 5 
3. 设 61,&2,… 是 独立 随机 变量 序列 , Sn = 6. +5: +6», 而 Smn = „2216 证 
明 如 下 奥 塔 维 安 尼 (Ottawiani) 不 等 式 : 


Р{|5,| >=} 
ах 2e} < тсрс, 
Е 9 z } шах Р{|5;„| <=} 
1<ј<п 


并 (在 Ее, = 0,i >1, 的 条 件 下 ) 导出 不 等 式 : 


= = 
f Р{ шах |5] > =} dt < 215,1 + 2 |, 了 P{lsn| > а. (53) 
o 1<7<п 2845,1 
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4. B Enin o 是 独立 随机 变量 序列 , Н Ед; = 0. 利用 (53) 式 证 明 , 在 这 种 情 
形 下 有 不 等 式 (10) 的 加 强 : 
ES} < ВЕ|5„]. 
5. 证 明 (16) 式 . 
6. 证 明 (19) 式 . 
т. Жо КЖ Я... ЖЕ ос 9 С..- С 9, Ш Ar E F (К = 
1,… ,n). 利用 (22) 式 证 明 如 下 德 活 列 英 基 (Дворецкий) REA: ХР => 0, 


Р (0 ^) <=+Р {Eraus > e} . 
k=1 k=l 


8. 设 X = (Xn)n>1 是 二 次 可 积 鞭 , 而 (bn)n>1 是 正 实数 不 减 序列 . 证 明 如 下 哈 
伊 克 - 雷 内 伊 (J. Hajek- А. Renyi) RER: 对 于 任意 入 > 0, 


P { ва |Z 
17% 


bk 
9. X = (Xn)n>1 EFE, 而 g(z) MRN (Fh) 函数 . ЖА, 对 于 任意 
E t, Ж г, 有 





Е(АХ, 
|> }< «ау а? №№, АЖ Xr- Xin Xo=0. 


k=1 


P{ шах Xk > г) s Eg(tXn) 
1<ј<ъ 


Таба) ` 
特别 ， 


rf, max Хь > a} <е-Ее*Х». 
lgjsn 


10. 设 &1,&2,… 是 独立 随机 变量 序列 , Н Efm = 0, Е = 1,n>1. 记 
= {>0)- 
i=l 


证 明 Ет!/? < оо. 
11. Я&= (6n)n>1 Ж - 2, Ш1<р<2. 证 明 


Қ Р 
УЗ 
j=1 


Esup 
nèl 








a 
< © > ЕР, 
j=1 


其 中 Cp 是 常数 . 
12. # X = (Xn)n>1 ÆR, Е&„ = 0,Е&2 < оо,п > 1. 证 明 (第 四 章 $2 练习 题 
5), 对 于 任意 n>1 和 >0, 有 





ЕХ? 
Р{ шах Х„> =. 
ES s } < © =2+ ЕХ2 
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84. 下 款 和 蒜 收 敛 的 基本 定理 


1. 有 界 单调 鞭 序 列 极限 的 存在 性 下 面 的 结果 在 整个 下 加 收 敛 性 问题 中 , 可 以 
视 为 数学 分 析 中 著名 事实 “有 和 界 单调 数列 有 (有 限 ) 极限 ”的 概率 类 似 ， 
定理 1 ( 杜 布 ) &Х=(Х„,#„)„ AFH, Н 


вир E|Xn| < ос, (1) 
n 


则 以 概率 1 存在 极限 lim Xn = Xow， 并且 ElXow| < оо. 
证 明 假设 
P (БХ, > lmX,} >0. (2) 
那么 , 由 于 
{йаХ„ > Шах,} = [J (ах, >b > a > limXn} 
а<ь 


(a,b 是 有 理 数 ), 故 存在 a 和 b, 使 
Р(Х, > b> a > lmXn} > 0. (3) 


# pala, b) 是 序列 X1,… Xn 自 下 而 上 与 区 间 (a,b) 相交 的 次 数 , 而 Bola, b) = 
Ша» (а,5). 根据 53 的 (37) 式 , 有 


ЕХ, -alt ЕХ} + lal 


кбл(а0) = Hna < Ела 


因此 ， 
supEX+ + |а| 
Efla, b) = lim Efa (a,b) < -"————— < оо. 


由 (1) RUR (由 于 ЕХ} < Е|Х„| = 2EX+ - ЕХ, < 2ЕХ} - ВХ!) ЯК ЕЙ, 有 





зир Е|Х„| < оо © sup EX+ < оо. 
n n 


然而 , 条 件 Ebola, b) < со 与 假设 (3) 矛盾 . 于 是 , 以 概率 1 存在 极限 lim Xn = Хо, 
而 由 法 图 引 理 可 见 
Е|Х| < sup 卫 |Xn| < оо. 口 


系 1 ЖХ Я ТЖ, 则 以 概率 1 存在 有 限 极限 lim Xn = Хх. 
系 2 ЖХ =(Х„,# „)„ 是 非 正 下 鞭 , 则 序列 


Х=(Х„#„), 1<п<о, Хо = шах, № ғ. (Ur) 
М 
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构成 ( 非 正 ) тж. 
事实 上 , 根据 法 图 引 理 ， 


EX% = Elim X, > ЕХ, > EX, > -оо, 
且 以 概率 1, 有 
E(X F m) = Ellim Х„\# m) > HmE(Xn|F m) > Xm- 
Жз ЖХ=(Х„,#„) ЖАА ЕЖ, 则 以 概率 1 存在 有 限 极 限 lim Xn. 
事实 上 , 这 时 有 
sup Е|Х„| = звирЕХ„ = EX; < оо, 
从 而 , 可 以 运用 定理 1. 


2. 鞠 几 乎 必然 收敛 也 是 在 11 上 平均 收敛 的 条 件 ” 设 а, 6,…… 是 独立 随机 变 
量 序列 , E Р{& = 0} =Р{& = 2) = 1/2. ЖА, X = (Xn F E) ER, 其 中 


х=[& F$ = oln ,én), 
i=l 
H ЕХ, = 1 和 Xn > X% = 0 (Р-а.с.). 同样 ,显然 ЕХ, 一 EXoo| = 1, 从 而 
Xn -» Хо. 这 样 , 条 件 (1) 一 般 不 能 保障 在 1! 的 意义 上 Xn KAF Xoo. 

下 面 将 要 介绍 的 定理 2 表明 , 如 果 将 条 件 (1) 加 强 为 “随机 变量 族 {Xn} 具有 
一 致 可 积 性 ”( 那 么 , 根据 第 二 章 56 的 第 5 小 节 知 , 性 质 (16) 成 立 ), 则 {Xr} 在 L 
意义 上 几乎 处 处 收敛 , 同时 也 在 L 的 意义 上 平均 收敛 . 

定理 2 ЯХ=(Х,,Я,) ТЯ, 且 随机 变量 族 {Xn} 一 致 可 积 . ЖА, 存在 
随机 变量 Хо, В Е|Х| < со, 使 当 n 一 00 时 ,有 


Xn > Х»(Р-ас.), | (4) 
Xa ES Xo. (5) 
这 时 , АЯ Х = (Х„Ў„),1<п< оов 0 (оғ) эй. 


证 明 由 定理 1 得 (4) R, 由 (4) 式 和 第 二 章 86 的 定理 4 (5) R. 
ЯЖ, Ш АЕ Hmn, 则 


ElalXm — Хо] 0, т оо, 


从 而 ， я 
lim Ј хар = f xoa. 
«= J 4 А 
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( /, хар). 


J XndP < ] XmdP < f Хар, 
А А А 


于 是 , 对 于 一 切 n> 1,Xn < (Xool Я n)(P – а.с.). 口 
Ж &Х=(Х#„) ATR, 且 对 于 业 个 p>1， 





由 于 序列 


是 非 降 的 , 可 见 


sup E|Xn| < со, (6) 
п 


则 存在 可 积 随机 变量 Xo 使 (4) 式 和 (5) 式 成 立 . 

对 于 证 明 只 需 注意 到 , 根据 第 二 章 86 的 引 理 3, 条 件 (6) 可 以 保障 随机 变量 族 
{Xn} 的 一 致 可 积 性 . 

3. 鞭 一 致 可 积 的 充分 和 必要 条 件 ”现在 引进 关于 条 件数 学 期 望 连 续 性 的 定理 ， 
是 关于 庚 的 收敛 性 的 最 早 的 成 果 之 一 . 

定理 З (Р. 列 维 (P. P. Lévy)) it (0,Я,Р) 是 概率 空间 , (Fn)n>1 是 非 降 
o- 代数 族 : Я. C 2 C … СЯ. Wit E 是 随机 变量 E ЕВ < со, Я = 
Р (=). ЖА, 以 概率 1 并 且 在 L! KAELL, 有 


EEF n) > ElElF o), п—оо. (7) 
证 明 Ш, = (67 „),п >1. 那么 ,对 于 a>0,b>0, 有 


fo esf EEEa еер 
{Х„|>а} {IXnl>a} {IXnl>a} 


=f kar + f klap 
{1Х„|>а„|е1<ь} {IXnl2a,l€]>6)} 


эрх] 20}+ [МР 
{I€l>65} 


b 
< Е + ар. 
а и fos е 


ЖФ а 一 oo, #Ф b 一 oo, 得 


lim sup IXnldP = 0. 
aSo n Дх. |>а} 


这 说 明 随机 变量 族 {Х„} 一 致 可 积 . 那么 , 根据 定理 2, 存在 随机 变量 Xo, 使 以 概率 
1 收敛 并 且 在 L РЕ Ж, 有 Xn = EEF n) 一 Xoo. 因此, 只 需 设 


Хь=Е( Я) (Р-ас.). 


за. Таа жз 5151: 





йт>»п,Ає Ж n, U 


|. XmdP = у Х,аР = /, EEF „)аР = J; аР. 


由 于 随机 变量 族 {Xn} 的 一 致 可 积 , 且 由 第 二 章 §6 Ж 5 知 : Чт 一 co 时 , 有 
EIA|Xm — Х| 一 0, 从 而 
人 ХР = А «ар. (8) 


该 等 式 对 于 任意 А e Fn 成 立 , 因而 对 于 任意 A є © Fn 成 立 . 由 于 ЕХ < 
оо, E|] < оо, 则 (8) 式 的 左右 两 侧 都 是 亦 可 能 取 负 值 的 o— 可 加 测度 , 不 过 这 样 的 
测度 是 有 限 的 , 并 且 在 代数 Us 上 重合 . 根据 卡拉 泰 奥 多 里 (C. Carathéodory) 


定理 (第 二 章 53), 由 于 测度 自 代数 到 o- 代数 上 的 延 拓 的 唯一 性 , 可 见 对 于 集合 
A € Fw =0(U Fn) 下 面 的 等 式 (9) 成 立 ; 


Ј ха = f вар = | BEF aP, AEF =. (9) 


随机 变量 X 和 EEF с) 是 Я „- 可 测 的 , 因此 由 (9) 式 根据 第 二 章 86 第 3 
小 节 的 性 质 1, 可 见 Xa = Е(&|\Ж „)(Р — а.с.). 口 

Ж 随机 序列 X = (Xn Fn) В, 当 且 仅 当 存在 随机 变量 E EJE < 
оо, 使 对 于 一 切 п >1,Х„ = (EF n), (PP X = (Xn, F n) Я). НВ п оо 
时 Xn 一 (EF n) (以 概率 1 ЖАА L! феа). 

事实 上 , WR X = (Xn F n) 是 一 致 可 积 鞭 , 则 根据 定理 2 存在 可 积 随机 变量 
Хо, 使 Xn > Хо (以 概率 1 收敛 且 在 L 中 的 收敛), 并 且 Xn = (Хо). 这 样 ， 
可 以 将 (F oo 可 测 ) 随机 变量 & 取 为 Xo 

由 定理 3 可 得 逆 命 题 . 

4. 应 用 列 维 定理 的 例 下 面 举 几 个 列 维 定理 应 用 的 例 . 

例 1 “0-1” # 设 &1,82,… 是 独立 随机 变量 序列 , 而 9 = ol En) E 
是 “尾部 ”事件 的 o- 代数 , 而 4 e Ж. 由 定理 3 可 见 


Е(ТА\#Ё) > EUF ©) = ІА (Р-а..). 


В Га 与 (61,… En) 独立 , 可见 BUAS $) = ЕГА, 因而 Ја = ЕЈА(Р 一 ac)， 
故 P(4) =0 或 P(4) = 1. 

下 面 的 两 个 例子 , 说 明 在 数学 分 析 中 上 面 引进 的 关于 收敛 性 的 定理 . 

$2 ШЖ у = f(z) 是 区 间 [0,1) 上 的 函数 ,并且 满足 利 普 希 茨 (R. О. 5. 
Lipschitz) 条 件 , W f = f(z) 绝对 连续 , 并 且 由 数学 分 析 熟 知 , 存在 一 勒 贝 格 可 积 函 
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= g(x), 使 s 
Ла — о) = {owas (10) 


(在 这 种 意义 上 gle) 是 f(z) 的 “导数 ”). 
现在 说 明 由 定理 1 可 能 得 出 这 一 结果 . 设 О = |0,1),. = .多 ([0,1)), 而 P 是 勒 
贝 格 测度 . 记 


Е Е 
о <т< =}, 

к=1 

F =о(&, En) = of&n} 而 设 


_ Ле + 27") ~ е) 
2-" ў 


因为 , 对 于 给 定 的 En ЖИН, 随机 变量 Enei 只 有 En 和 2-00 两 个 可 能 值 , 且 
相应 的 条 件 概率 都 是 1/2, 所 以 
Е|Хы|Ж„] = E(Xntilén) = HELS (En + 27®+)) — (и Е] 
=" TO +270990) — Де) + AIG +2") – F (En жа) 
= [f (En + 27") – f(én)] = Ха. 
由 此 可 见 ，X = (Xn, F n) ER, 并 且 由 于 Xn] < L, 其 中 工 是 利 普 希 茨 条 件 的 常 


Ж (2) - Ку) < Lle 一 外 注意 ,多 =. 罗 (|0,1)) = (UF n). 因此 , 根据 定理 3 的 
Ж, 存在 Я — 可 测 函 数 = g(z), 使 Xn — g (Р-а.с.), ЗВ 


Xn = Е(д\Ў n). u) 


Xn 


取 集 合 B = [0,k/2"], 则 由 (11) 式 , 有 


1 (5) = А0) = / е / М 9g(z)dz、 


从 而 , 因为 n 和 к 的 任意 性 , 由 此 得 所 要 求证 明 的 等 式 (10). 

Яз 0 – 00,1), = .2([0,1)), ПР 是 勒 内 格 测度 . 考虑 哈 尔 (A. Haar) 
函数 系 (由 第 二 章 811 例 3 的 定义 ). ® Я, = oH, Hn) 并 注意 到 Я = 
#([0,1)) = 000.3). 由 条 件数 学 期 望 的 性 质 以 及 哈 尔 函数 的 构造 , 不 难 导出 , 对 于 
博 雷 尔 函 数 fe 工 ,有 


EEF n] = у ]акН(т) (Р -a.c), (2) 
k=1 


其 中 | 
ок = Н) = | лены. 


34. 下 鞭 和 鞭 收 敛 的 基本 定理 1158 - 





换 句 话说 , 在 函数 /(т) 按 哈 尔 函 数 系 的 展开 时 , KERFA Е[7(2)137,) 是 傅 里 
叶 级 数 的 部 分 和 . 那么 , 将 定理 3 HFR (EF n) Fn) 可 得 , 当 n 一 o0 时 


Ул Нь)Н(ж) > (г) (P — a.c.), 
k=1 
шүн 
J У нони — f(z)| dz — о. 

k=1 

BA BE) 是 随机 变量 序列 . 根据 第 二 章 810 的 定理 2, 如 果 级 数 并 
以 概率 1 收敛 , 则 它 也 依 概率 收敛 和 按 分 布 收敛. 结果 表明 , 假如 随机 变量 £, с... 
独立 , 则 逆 命题 也 成 立 : 车 由 独立 随机 变量 &1, £2,… 构成 的 级 数 并 En 按 分 布 收敛 ， 
еее 

这 一 性 质 可 以 用 如 下 方式 证 明 . № $, = а +. Enn > 1, В 5, S 5, 
则 对 于 每 一 个 实数 t, Бе". — Беч, BAR, 存在 5 > 0, 使 对 于 所 有 || < 6, 有 
|Eeits| > 0. 取 某 一 to, 使 之 满足 || < 5, 则 存在 no = no(to), 使 得 对 于 一 切 п > по, 


有 Ectos] > c > 0, Ж с 是 某 一 常数 . 
对 于 n> по, 建立 一 序列 X = (Xn F n), 其 中 





ettoS。 
= Еейо5, › 


由 于 假设 随机 变量 &1, 2,… 独立 , 则 序列 Х = (Xn Fn) ЖЮ, В. 


Xn Fn = о(&, ,én). 


вир Е|Х„| < c-1 < оо. 


那么 , 由 定理 1 可 见 , 以 概率 1 极限 lim X 存在 并 且 有 限 . 因此 极限 imetts" 也 以 
概率 1 存在 . 因而 可 以 断定 : 存在 5 > 0, 使 得 对 于 集合 T= {t: | < б} 中 每 一 个 t， 
极限 limes. 以 概率 1 存在 . 

设 TxQ= (шо): є T,weQ},. 多 (T), ЖТ 上 勒 贝 格 集合 的 c- КЖ, 而 入 
是 在 (T,. 多 (T)) 上 的 勒 贝 格 测度 . 其 次 , 记 


C={(t,w) ЕТХЯ: lim e"n) 存在 }. 
显然 , C e #(Т)®.Ў. 
上 面 曾经 证 明 , 对 于 每 一 个 teT,P(C:) = 1, 其 中 G = {w ЕО: (6и) Е С} № 
在 点 t 处 集合 С HRR. 根据 傅 比 尼 定理 (第 二 章 86 的 定理 8): 


es Ic(lt,w)d(A x Р) = 人 (/ тео) = [сә = A(T) = 25 > 0. 
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另 一 方面 , 仍然 根据 傅 比 尼 定 理 : 


МТ) = ТИИ 100. 0)а(А х Р) = 人 (/ оу ар = J, А(С„)аР, 


其 中 О. = {t: (tw) ЕС}. 

由 此 可 见 , 存在 集合 О, Н P(G) = 1, 使 得 对 于 所 有 we ©, 有 С.) = ХТ) = 
26 > 0. 

从 而 , 可 以 断定 : 对 于 每 一 个 we О 和 对 于 所 有 ЕСС. 极限 lim ets» 存在 ; 并 
HRA Co 的 勒 贝 格 测度 大 于 0. 由 此 以 及 练习 题 8, 对 于 每 一 个 we О, 极限 lim Sn 
存在 且 有 限 . 由 于 PÑ) = 1, 可 见 极限 lim 5, 以 概率 1 存在 并 且 有 限 . 


5. 练习 题 
1. Я {Fn} ЕЖЖо- 代数 族 ,多 29.2... Я’, = П, їй у 是 某 一 可 积 
随机 变量 . 证 明定 理 3 之 如 下 的 类 似 成 立 : 当 — оо 时 , P- 几乎 处 处 , 以 及 在 L 
收敛 的 意义 上 , 有 
Е(т 9) > ENF о). 


2. 设 &1,62,… 是 独立 同 分 布 随机 变量 序列 , El&1| < оо, ЕЕ! = т, Sn = +... + 
En 首先 证 明 ( 见 第 二 章 87 练习 题 2) 


Sn 
Е(& |5, бич, ---) = Е(|5һ) = (Р-ас.), 


然后 利用 练习 题 1 的 结果 证 明 强大 数 定律 : 当 一 оо Rt, P- 几乎 处 处 以 及 在 [1 
的 意义 上 , 有 
Z2 эт. 
3. 证 明 如 下 反映 “ 勒 贝 格 控制 收敛 定理 与 P. 列 维 定理 ”联系 的 结果 . 假设 
(&n)nz1 是 随机 变量 序列 , 满足 : En — &(Р – а.с.),|&„| < п, Ел < оо, 而 (Fm)mz1 是 
非 降 o- 代数 族 , F o = 0 (UF m). ЖА, (Р — a.c.) 


„їп Elen F m) = Е (Я >). 


4. 证 明 (12) R. 
5.8 0 =0,1),Я =.(,1)), P 是 勒 贝 格 测度 ,而 f= (х) € L. іа 


(к+1)2 " 
Sala) = 2" IN ву, К" < т< (6+ 1)27". 


证 明 f(z) 一 f(z)(P — а.с.). 


35. ЖАННИ 1155 





6. 设 О = 00,1), Я = .#([0,1)) ,P 是 勒 贝 格 测度 , 而 f = f(z) e L. 假设 该 函 
数 在 [0,2) 上 是 周期 的 , 并 设 


7 
Ра) = У." Це"). 
i=l 
证 明 户 (z) > f(x) (Р -ас.). 
7. 证 明 , 如 果 X = (Xn F n) 是 广义 下 蒜 (81 定义 2), 满足 
inf sup Е(ХЯ|Я m) < со (P — a.c.), 


则 对 于 X = (Xn, F n) 定理 1 仍然 成 立 ， 
8. 设 (an)n>1 是 一 数列 , 对 于 一 切实 数 t: |t| < 56 > 0), 存在 极限 lime“. 证 


明 极限 шла» 存在 并 且 有 限 . 

9. ЯЕ=Е(т), те В, 是 分 布 函 数 , 而 a є (0,1); 假设 存在 Өє В, 使 F(0) = а. 
构造 序列 Ху, X?,… ( 罗 宾 斯 - 门 罗 [H. Robbins-Monroe] 方法 ), 使 

Хи = Xn —n-!(Yn — а), 
其 中 Yi, Yo 是 满足 
Е | _ ] ЕС»), Ж#у=1, 
Р(У = y|X1, + Xni Yiee Yn) = | LFX) “у=,” 

的 随机 变量 . 

证 明 “ 随 机 逼近 ”理论 的 如 下 结果 : Е|Х„ — 6] 一 0,n 一 о. 

10. 设 X = (Xn, F „)„>1 Ж ТЇЇ, 且 对 于 每 一 个 停 时 r, 有 下 (XrT(r < co)) # оо. 
证 明 以 概率 1 极限 iim Х„ 存在 . 

11. 设 X = (ны ER, ПУ ы = ( Ù # „|. 证 明 ,如 果 序列 (х) 

n=l 

一 致 可 积 , 则 极限 Xs = lim Xn(P 一 ac) 存在 , В. “封闭 ” 序列 双 = (Xn, Я n)i<nco 
ER. 

12. # Х = (XoF n)a ЖЕЙ, 而 97. = о(\) #„). ЧЕЙ, 如 果 序列 

n=l 

(х). 一 致 可 积 , 则 极限 Xo = lim Xn(P — ас.) FE, Н “封闭 " 序列 又 = 
(Xn F n)icnco Ж К. 


85. THAPA 


1. 随机 序列 类 C+ 设 X = (Х„,#„) 是 随机 序列 以 {Xn 一 } 或 {—со < 
lim Xn < оо} 表示 “使 lim Х, 存在 和 有 限 的 基本 结局 的 集合 ". 对 于 任意 二 事件 А 
和 В, 如 果 P{IA < Гь) = 1, 则 亦 称 АС B(P 一 a.c.). 
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如 果 X РН supEIXn| < оо (或 者 等 价 地 sup EX+ < оо), 则 根据 64 定理 
1, 有 


{Xn >}=9 (Р-ас), 即 {Xn +} = 0. 
现在 讨论 , 在 条 件 supEIX,| < ос 不 成 立 的 情况 下 ， 关 于 下 款 的 收敛 集合 
{Xn 一 } 的 结构 问题 . 
Ж#а>о, 
оо, # {} = ©. 
定义 如 果 对 于 任意 a> 0, 有 


елаш E {} 75, 


Е(АХ,,)+ (та < оо) < оо, (1) 


则 称 随机 序列 X = (Xn F n) ЖЕ CHX Е C+), 其 中 АХ, = Xn 一 Xn-1, Xo = 0. 
显然 , 如 果 
Esup|AXn| < оо (2) 


则 X e C+; 特别 , 如 果 (P - a.c.) 对 于 一 切 n> 1， 
IAxn|<C < оо. (3) 
定理 1 如 果 下 闭关 ECt, 则 (P 一 a.c.) 
{sup Xn < оо} = {Xn ә}. (4) 


证 明 包含 关系 {Xn >} С {sup Xn < оо} 显然 . 为 证 明 相反 的 包含 关系 , 考虑 
“ЖИЕ СЕЙ XT = (Хола F n). ЖА, 由 于 (1) R, 有 


supEX$ an <а+ЕХ}# {т < оо) < 2a + Е(АХ,,)* {ть < оо} < оо. (5) 
从 而 , 由 84 定理 1 (Р-а.с.), 有 
{та = оо} С {Xn >}. 


由 于 


U {ra = оо} = {sup Xn < оо}, 
a>0 


可 见 {sup Xn < оо} С {Xn —}(Р-а.с.). о 


__ $5. тж са 


5157. 





A AX AR, Н Езир|АХ„|< о. ЖА, 


{Xn >}U шах, = оо, lmXn = +00} = О (Р-а.с.). 


实际 上 , 将 定理 1 用 于 X 和 -X, 可 得 
{limXn < оо} = {sup Xn < оо} = {Xn 一 } (Р-а.с.), 
{шаХ„ > —оо} = {inf Xn > оо} = {Xn >} (P ас). 


因此 ， 
(тах, < оо} (Шах, > —оо} = {Xn >} (了 一 ac， 


于 是 , (6) 式 得 证 ， 


命题 (6) 表示 , 对 于 满足 条 件 EEsup |AXn| < оо @# X 的 几乎 一 切 轨道 , 或 者 存 
在 有 限 极限 , 或 者 这 些 轨道 按 如 下 意义 上 , 表现 “不 好 ”: imXn = +оо, Хь, = 一 co. 
2.，C+ 类 非 负 款 的 性 质 如果 &1, 2,… 是 独立 随机 变量 序列 , Н Eé; = 0,1&| < 
c< оо, 则 根据 第 四 章 82 定理 1, ИЖЕ ИЯК (Р - a.c), НХ У 62 < оо. № 


列 


X=(X Fn) Хь=а+: +8, Яв=0{1, Enh 


是 平方 可 积 鞭 , В. (Х)„ = È 2, 而 可 以 将 命题 表述 为 如 下 形式 : 
{Жк < о} ={Х„ә}=0, (Рас), 


其 中 (X)oo = lim(X)n- 
下 面 的 命题 将 这 一 结果 推广 到 拷 和 下 蒜 的 更 一 般 的 情形 . 
定理 2 &Х=(Х„,#„) ЖТЖ, 而 


Xn = тһ + Ав 


是 其 杜 布 分 解 . 
а) 如 果 X ФАТ, 则 


{А < оо} С {Xn >} С {sup Xn < оо} (Р-а.с.). 
b) wk X € C+, M 
{Xn =} = {sup Xn < оо} © (А. < оо} (P — a.c.). 
c) 如 果 Х АТИ, НХЕС+, 则 


{Xn >} = {вир Xn < оо} = {4 < оо} (P — a.c.). 


(7) 


(8) 


(9) 
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证 明 a) (7) 式 的 第 二 个 包含 关系 显然 . 为 证 明 (7) 式 的 第 一 个 包含 关系 , 引进 
时 间 
人 >a}, #a>0, 
Oa = 
+оо, 若 {-} = е. 


那么 , 4v, < a, 且 由 于 52 定理 1 的 系 1, 可 见 
EXnno, = ЕАпло, < а. 


设 Ya = Хьло,, W Ya = (Уз, Я n) ЖЕ, 其 中 supEY? < а < оо, 而 由 于 其 非 负 
性 , 由 84 定理 1, 可 见 . 


{Ак < оо} = {04 = оо} © {Xn >} (Р ас). 


因此 
(А < оо} = [J {4% < a} © {Xn >} (Р-ас.). 


а>0 


b) 由 定理 1 可 得 (8) 式 的 第 一 个 等 式 . 为 证 明 (8) 式 中 的 包含 关系 , 注意 到 , 根 
据 关系 式 (5), 有 


ЕА ла = ЕХ „л < ЕХ} an < 2a + Е(АХу,)+1{та < оо}, 
从 而 
EA, = Elim Ar,An < оо. 


于 是 , 由 
U {ra = оо} = {sup Xn < оо}, 


а>0 
得 {Ta = оо} © {A < оо} 和 所 要 证 明 的 (8) R. 
с) 该 命题 是 命题 a) 和 b) 的 直接 推论 . o 
+ 可 以 将 “X 的 非 负 性 ”条件 换 成 supEX; < оо. 
系 1 их, = 和 1 十 … 十 bn, ЖРа>20,Еб < оо, Н& Я Я ТЮ, т 
F o = {2,9}. ЖА, (Р-а.с.) 


位 ElénlF 1) < =} S {Xn ә}, (10) 
n=l 


ЖАЯ. Зо Ж Езир&„ < оо, Я (Р-а.с.) 


(яо) = {Xn >} (п) 


п=1 


35. ТЖЕ 


* 159. 





Я 2 ( 博 雷 尔 — 坎 泰利 — 列 维 引 理 ) 如 果 事件 BEF n ША (П) 式 中 设 


En = 1в,, 得 (P-ac.) 


[темя < =} = {È n. < =} Р 
n=l п=1 


3. 平方 可 积 鞭 的 性 质 
ЖЕЗ 设 M= (Mn 多)n>l 是 平方 可 积 凌 , Я] (Р-а.с.) 


{(М) < оо} © {Mn =>}. 
假如 还 满足 Езир|АМ„|? < оо, 那么 (P-a.c.) 
{0М) < оо} = {Mn >}, 


其 中 А 
(м) = УЎЕКАМ,)219,-1), 
п=1 


而 Mo = 0, Fo = {2,9}. 


(12) 


(13) 


(14) 


(15) 


证 明 ЖЕ: M? = (М2, F n) 和 (M+1)? = ((М+1)2,Я„). 那么 ,在 


它们 的 杜 布 分 解 
М? =т„+А, 和 (М+1)? =mi + Ap 
中 随机 变量 A 和 д” 相等 , 因为 


А, = УЎЕ(АМ2 к-1) 
к=1 


而 
А" = у E[A(M + °F = у ЕАМ k-1) = А. 
k=1 


k=1 


从 而 , 由 (7) 式 , 以 概率 1 有 


(М), < оо} = {Аш < оо} © {M} >} КОМ, +1)? >} = {Mn >}. 


由 于 (9) R, 为 证 明 (14) 式 只 需 验证 , 条 件 Езир|АМ„|? < со ИДА ЕЙ M? 属 


于 C+ Ж: M?e C+. 
H Ta = inf{n > 1 : M2 > a},a > 0, WERE {ra < оо} 上 ,有 


|MŻ | = 1м2 — М? | < IMs, — Mr 1? + 21М,, | IMs, — М, 1] 


< (АМ, )? + 2а!/?|А М... |, 
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由 此 , 得 


Е|М? |та < оо} < E(AM,,)’I{Ta < оо} + 2a2VE(AM-)27{r < оо} 
< Esup|AMnl|? + 2а!/?,/Езир |АМ„|? < оо. о 
作为 应 用 这 一 定理 的 例子 , 我 们 引进 下 面 的 结果 , 可 以 视 为 平方 可 积 蒜 的 强大 
数 定律 的 独特 形式 (对 照 第 四 章 83 定理 2, 以 及 第 四 章 第 3 小 节 系 2). 
定理 4 &М=(М„,#„) 是 平方 可 积 款 , 而 4 = (An F ni) 是 可 预测 的 递 
增 序列 , НА, 2 1, Aœ = оо(Р-а.с.). 


如 果 (了 一 ac.) 
99, 2 
У EKAM Fal soi (6) 
i=1 i 
则 以 概率 1, 有 
ээ, п оо. (17) 


特别 , 如果 (М) = (М), 1) ФЯ М = (Mn, F n) 的 二 次 特征 , 且 
(М). = co(P – а.с.), 则 以 概率 1, 有 


0 人 一 00. (18) 


证 明 ЖАН т = (mMm Fn), B 


Z AMi 


msa 
i 


n 2 
(ma = У Бам. (19) 
kzi i 
55 'АкАтк 
к 
Аһ ' 
可 见 , 根据 克 罗 内 克 引 理 (第 四 章 53), 如 果 以 概率 1 存在 有 限 极限 lim mn, 则 


М, = 0, поо (Р-а.с.). 
Аһ 


而 由 于 (13) <, 有 
(т) < оо} < {mn >}, (20) 


因此 由 (19) 式 可 见 , (16) 式 是 (17) 式 成 立 的 充分 条 件 . 
最 后 , 假如 An = (M)。 WRH (16) 自然 成 立 (练习 题 6). 口 
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例 考虑 独立 随机 变量 序列 51,6, ---, В. Eg = 0,0, = Di > 0, 而 序列 X = 
(Xn)nz0 决定 于 如 下 递 推 方程: 


Хит = 9Xn + 6+1, (21) 


其 中 Xo 不 依赖 于 &1,€2…, 而 0(-00 < 9 < оо) 是 未 知 参数 . 
我 们 把 Xn 视 为 在 时 刻 п 的 观测 结果 , 并 且 要 求 估计 未 知 参数 9. 以 量 


S XeXkt 

ё, = ш Рн (22) 
п-1 х} 
& рк 





为 根据 观测 结果 Xo, Xi, Xn 对 9 的 估计 , 且 当 分 母 为 0 时 , 9 0, = 0. (0, 是 由 
最 小 二 乘法 得 来 的 估计 .) 
由 (21) 和 (22) 式 , 显然 有 





B=0+ 
其 中 у 
Хк&к+1 < 
м, en, a =a- piy 
因此 , 假如 未 知 参数 的 真 值 为 9, 则 
P{2 一 外 =1 (23) 
当 且 仅 当 (Р - а.с.) Ж 
Too п. (24) 
现在 证 明 , 条 件 
зир Озы < оо, У (& л 1) = (25) 


对 于 а 式 是 充分 的 , 因此 对 于 (23) 式 也 是 充分 的 . 有 


n=1 
хі 2 К Dn+1 | g2 
Е < оё. 
ү: D, +6 22; < 2 |ѕир D, +0°| (М) 


п=1 


{х (2 А ) Е =} © (М) = оо}. 








于 是 ， 
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根据 “三 级 数 " 定理 (第 四 章 82 定理 з), 车 级 数 
æ Ге 
Е | 2% л1 
32) 
发 散 , 则 级 数 А 
(лт), 
Ln) 
以 概率 1 也 发 散 . 从 而 , P{(M)。 = оо} = 1, 故 由 定理 4 的 论断 (7) 直接 得 (24) R. 
具有 性 质 (23) 的 估计 量 Ann > 1, 称 做 强 相合 的 (对照 第 一 章 87 中 “相合 性 ” 
的 概念 ). 
在 下 一 节 86 的 第 5 小 节 , 对 于 高 斯 序列 1,6... 的 情形 , 将 继续 这 个 例子 . 
定理 5 ЖХ-(Х,.7,) АТ, 而 


Xn = ть + Ав 


是 其 杜 布 分 解 . 如 果 |АХ„| < С, М (Р-ас.) 


{(т) + Ао < оо} = {Xn >}, (26) 
或 同样 地 ， 
{5 вах, + (хз, = {Xn ә}. (27) 
证 明 由 于 Е 
An = ува”, (28) 
т» = У вах, (АХ 12-1), (29) 
к 


则 由 于 假设 |AXn| < С, т = (т, F n) 平方 可 积 , E |Amn| < 2С. 那么 , 由 (13) 
式 , 有 
(т) + Ае < оо} © {Xn >}, (30) 
而 且 , 根据 (8) 式 , 有 
{Xn >} © {Ах < оо}. 
因此 , 由 (14) 式 和 (30) 式 , 可 见 


{Xn >} = {Xn >} ПА < оо} = {Xn >} N {Ае < оо} N {mn >} 
= {Xn =} N {Ах < оо} N {lm) < со} 
= {Xn >} N {Ао + (т) < оо} = {Ав + (т) < оо}. 
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最 后 , 由 于 (29) 式 . 有 
(т), = È {ENAX IF кц — [Е(АХь\#,..)]?}; 
可 见 (26) 式 和 (27) н. 而 由 非 负 项 级 数 
Увац) 
的 收敛 性 , 可 见 级 数 | 


УЗЕ(АХь\#,-,)]? 
k=1 


的 收敛 性 . o 

а. 级 数 并 6 的 收敛 集 合 柯 尔 英 总 洛 夫 “三 级 数 " 定理 (第 四 章 82 定理 3) 
给 出 了 , 独立 随机 变量 的 级 数 E E 以 概率 1 收敛 的 充分 且 必要 条 件 . 下 面 的 定理 
6, 在 不 假设 随机 变量 &1,62,… 独立 的 情形 下 , 给 出 了 级 数 D En 之 收敛 集合 的 描述 ， 
而 其 证 明基 于 定理 2 和 定理 3. 

定理 6 ”假设 5 = (Я), 是 随机 变量 序列 , Jo = (0,0) 而 是 正常 数 . т 
А, аку, 在 集合 А ЕКА 其 中 4 是 使 三 个 级 数 

УР > 42-1), УЕ). DO DEIF n1), 

同时 收敛 的 集合 ,其 中 E = nl(len| < с). 

证 明 设 级 数 X= Хы. 由 于 级 数 EPU > oF n) (在 集合 4 上 ) 收 
Ж, 则 根据 定理 2 的 系 2, URAM DEELS nı) 收敛 ,有 


АП {Xn }= AN (екы <o) -} 
к=1 
=AN ЭЗ < о) — ЕГ < lz- -}. (31) 
k=1 
BE m = ég - Ве) 和 一 3 т. ЖА, У = (Yn F n) 是 平方 可 积 轩 ,其 中 
ть < 2c. 根据 定理 3， е 


Ас {Ур 1) < оо} = (У) < оо} = {Yn =} 


因此 , 由 (31) 可 见 
АП {Xn ә} = А. 


于 是 , АС {Xn >} o 
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5. 练习 题 

1. 证 明 , 如 果 下 著 X = (Xn Я n) 满足 条 件 Езир|Х„| < оо, WERF C+ Ж. 
2. 证 明 , 对 于 广义 下 款 , 定理 1 和 定理 2 仍然 成 立 . 

3. 证 明 , РГ ЖЕЙ, 以 概率 1 有 包含 关系 : 


{ш sup Е(Х#|Я m) < >} с {Xn ә}. 
т nam 


4. 证 明 , 对 于 广义 拷 , 定理 1 的 系 仍然 成 立 . 
5. 证 明 , C+ KEER У ЕЕ FE. 
6. W an >0,n > 1;5„ = У ак, 证 明 
k=1 
Son сз 
k=1 [А 


т. Я Eo EnEn o 是 一 致 有 界 随 机 变量 序列 : En) < cm > 1, 证 明 级 数 
Ур 和 УЕ, ва), 


п20 п>1 


以 概率 1 或 者 同时 收敛 , 或 者 同时 发 散 . 


36. 概率 测度 在 带 滤 子 可 测 空间 上 的 绝对 连续 性 和 奇异 性 


1. 测度 的 局 部 绝对 连续 性 和 奇异 性 ” 设 (Q, 多 ,) 是 某 一 可 测 空间 , 而 (Я „и 
是 该 空间 上 的 o- 代数 族 , Н.У сс Я.С... СЯ, ДФ 


s -e (Üs). a) 
n=1 


BEE Q, F n) 上 有 两 个 概率 测度 P ЯР. 记 
Р„=РЇ#„ Р„=Р\Ў„ 


为 两 个 概率 测度 在 上 多 ,的 收缩 , 即 P。 和 BP。 是 (Fn) 上 的 概率 测度 , 并 且 对 
于 Be 多 ,有 
Pn(B) =Р(В), Р„(В) = P(B). 

熟知 , 测度 Р 称 做 关于 测度 P 绝对 连续 的 GUE P <P ), 如 果 Pn(4) =0,Ає 
F n, WYE 下 (4) = 0. 

如 果 下 <P HPP, 则 称 测度 P A Р 为 等 价 的 (ЕР ~ P). 

测度 Р 和 称 做 奇异 的 或 正 交 的 ( 记 作 Р 上 Р), 如 果 存在 集合 Лея, 使 
P(A) = 1 和 P) = 1. 
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5 loc 


ЖХІ ЖЕР 关于 测度 P 为 局 部 绝对 连续 的 (ЕР <Р), 如 果 对 于 任 
Жа>1 有 
Р, < Pn (2) 


这 一 节 考虑 的 基本 问题 在 于 说 明 , 由 局 部 绝对 连续 性 证 © Р, В Р < P,P ~ 
P,P LP 等 性 质 成 立 的 条 件 . 我 们 以 后 将 清楚 地 看 到 , 蒜 论 是 可 以 全 面 地 回答 这 些 
问题 的 数学 工具 . 
回忆 , 在 第 三 章 89 中 . 对 于 任意 概率 测度 , 讨论 过 概率 测度 的 绝对 连续 性 和 奇 
异性 问题 . 曾经 说 明 , 利用 海 林 格 (E. Helinger) 积分 可 以 表述 相应 的 准则 (定理 2 和 
定理 3). 下 面 引进 的 关于 概率 测度 的 绝对 连续 性 和 奇异 性 的 结果 , 亦 可 由 这 些 准则 
得 到 (在 专著 [84], [87] 中 陈述 了 有 关 方 法 ). 为 更 完整 地 演示 运用 85 中 关于 下 款 的 
收敛 集合 , 我 们 在 此 倾向 于 略 有 不 同 的 叙述 方法 . (注意 , 这 一 节 全 部 叙述 , 假设 局 部 
绝对 连续 性 成 立 的 . 这 样 做 仅仅 是 为 了 简便 . 对 于 一 般 情形 , 请 读者 参阅 [84], [87]). 


loc 


这 样 , B Б<Р. 设 














ав, 

тар, 

ЖР, 关于 P 的 拉 东 - 尼 科 迪 姆 导数 . BA, en 07, 可 测 , 并 且 如 果 AEF n 
则 


Zn 





Ee E A ek 
Ј эр J ағ = Рь+1(А) = Pn(A) = авар = 人 „АР. 
由 此 可 见 , 随机 序列 = = (2n, F 3) а> 关于 测度 P ЖЖ. 
在 “绝对 连续 性 和 奇异 性 ”的 全 部 问题 中 , 关键 环节 是 下 面 的 定理 . 


> loc 


定理 1 设 P<P. 
а) (P + Р)/2 以 概率 1 存在 极限 lim zn, 记 为 zoo, 使 


Р{2 = оо} = 0. 
b) 有 如 下 勒 贝 格 分 解 : 


B(A) = J 24Р +P(A П {zæ =оо}), AEF, (3) 


而 且 测度 了 (A 门 {zoo = оо}) № P(A), AEF, AAHH. 
证 明 我 们 首先 指出 , 根据 经 典 的 勒 贝 格 分 解 (第 三 章 89 (29) R), 任意 概率 
测度 Р 关于 概率 测度 P 有 如 下 表现 : 


Ba) = /iaP + F(AN 50), Aef, a) 
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其 中 
ар ар 


5249 * аа’ 

而 其 中 测度 О, 例如 可 以 取 作 © = (Р +Р)/2. ЖЖ, (3) 式 可 以 视 为 一 般 分 解 (4) 的 
具体 化 , 与 所 考虑 情形 的 如 下 特征 相 联系 :了 © РШ B, < Pan >1. 设 
ар, ~ _ dP, 
IQ T IQ 

序列 (Gn F n) 和 Gn F n) 关于 测度 Q ÆR, 并 且 满足 D<in < 2,0 < Fn < 2 
因此 (根据 84 定理 2), 既 关 于 测度 Q 几乎 处 处 , 又 在 LF, Q) 的 收敛 意义 上 存 
在 极限 : 


Үн 





1 = 
3n = 9, = zP +Р,). 


do = limn, Зо = зһ. (5) 
特别 , 由 在 ло, 77, О) WEEKK, 可 见 对 于 任意 Ae m H 
заа = а | аа = f е9 Р) = РОА), 
WA, HERRALLE (C. Carathéodory) 定理 (第 二 章 83) 可 见 , FER A cF = 
(UF) 有 
[iei = 0а), 
А 
EI dB/dQ = 3; 类 似 地 , 有 
Ј аа = (а) 
А 
BI dP/dQ = з=. 
从 而 , 这 就 证 明了 自然 期 待 的 结果 : 假如 测度 和 Q 定义 在 F =o (05, 


上 , 而 Pn № Q 是 这 些 测度 到 Fn 上 的 收缩 , 则 关于 测度 Q 几乎 处 处 和 诈 (о, 


F.Q) 收敛 的 意义 上 , 有 
ар, ар 


" dQ, 99’ 





类 似 地 , 有 Ñ a 

ар, ар 

n dA, 99’ 

在 我 们 所 讨论 的 特别 情形 下 , 即 当 Б, < Pan > 1, 时 , 不 难 证 明 , (Q-a.c.) 有 





2, 8] © 
3 


这 时 , 由 于 
з = 0,3. = 0) < [4 = 0} + Р, =0}] = 0, 
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因此 , 可 见 在 (6) 式 中 (О-а.с.) 不 会 出 现形 如 0/0 不 定式 的 情形 . 
Жш 2/0 的 记号 , 像 通常 一 样 认 为 等 于 +оо. 需要 指出 , ИХ (en, Fn) 是 非 负 
Ж, 所 以 由 52 的 (5) 式 可 见 , 如 果 z = 0, 则 对 于 一 切 n >r (Q-a.c.), zn = 0. МЖ, 
同样 对 于 (Gn F n) 也 是 一 样 . 由 此 可 见 , 点 0 和 +оо 也 是 序列 (z)n>1 的 “吸收 状 
由 于 (5) RA (6) 式 可 见 , Q-a.c. 存在 极限 
lim3n jo 


200 = lim zn = — = =®. (7) 
п lim3n доо 
т 





因为 
P{3o =0} = codQ = 0, 
{е = 0) о. Q 
所 以 P{zw = оо} = 0 , 因而 定理 的 命题 a) 得 证 . 
为 证 明 (3) 式 , 利用 (4) 式 的 一 般 分 解 . 对 于 现在 所 考虑 的 情形 , 由 已 经 证 明 的 
结果 : _ 
3= ча =, $= б = 和 (@-а.с.), 
知 由 (4) 式 , 得 _ 
ee о КЕ 
Ba) = | Зар + PAN {s = 00: 
由 (т) R, 以 及 由 于 Pio = 0) = 0, 得 所 要 证 明 的 (3) 式 ， 最 后 注意 到 ， 由 于 
Р{2 < оо} = 1, TANF A e 多 , 则 测度 


P(A)=P(AN (2 < оо}) 和 Р(АП {zæ =оо}) 


是 奇异 的 . 口 
由 勒 贝 格 分 解 (3), 可 得 如 下 关于 局 部 绝对 连续 概率 测度 的 , 绝对 连续 性 和 奇异 
性 重要 的 准则 . 
定理 2 &Р©Р, Б, < Pnn>1. ЖА, 


Р «Р = Еш =1 心 Efzw < оо} =1, (8) 
P LP & Ez% =0¢%P{z% = оо} =1, (9) 
其 中 已 表示 对 测度 卫 的 平均 (数学 期 望 ). 
证 明 在 (3) 式 中 设 4= ,得 
Ег = 1 & Р{2 = оо} =0, (10) 
Ezw =0 Р{ге = оо} = 1. (11) 
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如 果 Б{ль = оо} = 0, 则 仍然 由 (3) RTA P < P. 

相反 , 假设 Р < P. 那么 , 由 于 P{zw = оо} = 0, 可见 Р{2 = оо} = 0. 

КЖ, 假如 Р 1 Р, 则 存在 集合 Be Я, &Р(В) =1 Я Р(В) =0. 那么 ,由 (3) 
式 可 见 P(B Гг» = оо}) = 1, 因此 Б{ 2 = оо) = 1. 相反 , 假如 Р{ 2 = оо} = 1, 
WAA В {2 = со} = 0, 所 以 性 质证 1 P 显然 . 口 

2. 应 用 绝对 连续 性 和 奇异 性 准则 的 例 由 定理 2 知 , 绝对 连续 性 和 奇异 性 准 
则 , 或 者 可 以 用 测度 P 的 术语 表示 (并 验证 等 式 Ez = 1 R Ez = 0), 或 者 可 以 通 
过 测度 Р 的 术语 表示 (并 验证 等 式 P{zoo。 < оо} = 1 RÈ Р{2 = оо} = 1). 

由 第 二 章 86 定理 5 Я, 条 件 Ezo = 1 等 价 于 条 件 “ 随 机 变量 族 {zn} (关于 
测度 P) 一 致 可 积 ”. 这 一 情况 , 使 得 可 以 给 出 绝对 连续 性 P< Р 简单 的 充分 条 件 . 
例如 , 若 


sup Elznlnt zn] < оо (12) 
п 


或 如 果 


зирЕ[21+*] < оо, < > 0, (13) 
п 


则 由 第 二 章 86 引 理 3 知 , ВЕНЫ {21} 21 一 致 可 积 , 因此 Р < P. 

在 许多 情形 下 , 更 倾向 于 运用 通过 测度 Б 的 术语 表示 的 准则 , 因为 这 时 可 以 归 
结 为 “尾部 ” 事件 {zo。< оо} 之 Б 概率 的 研究 , 而 这 里 可 以 利用 “0-1” 律 类 型 的 
论点 . 作为 例子 , 我 们 现在 讨论 如 何 由 定理 2 导出 角 谷 择 一 性 . 

设 (OF, P) 是 某 一 概率 空间 , (RO, Bo) 是 数列 = (z1,z2,…) 的 可 测 空间 ， 
其 中 . 罗 w = BRS), H Bn = o(z1,… ,zn). BRE = (61,62,…) 和 = (6,6) 
是 两 个 独立 随机 变量 序列 . 

记 已 和 Р 相应 为 随机 变量 5 和 2 在 (R>, Ba) 上 的 概率 分 布 , 即 


Р(В)=Р{&є B}, Р(В)у=Р{&є В}, Вє.#„. 


亦 假设 
Р, = Р#„,Ё, = PB» 


Æ PA P WEE B, 上 的 收缩 , 且 对 于 А EBR), 
Ре, (А) = Р{& € А}, 
Р; (А) =P{én Е В}. 


定理 3 (ЯВ (S. Kakutani) 择 一 性 ) AIE = (1,62,…) FE = (&1,62,…) 
是 两 个 独立 随机 变量 序列 , 且 满足 条 件 


P; <Р, п>1. (4) 
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证 明 显然, 条 件 (14) 等 价 于 条 件 : P, < Pan > 1 РФР. 





zn = 和 = а(т1)---4а(тһ), 
其 中 
ар; А 
ale) = JE E. аз) 
从 而 
{1 : 2% < оо} = {z : ша < 00} = f- с Ух) < =} z 
i=l 
事件 


|. : Ува) < =} 
i=l 


是 “尾部 的 "， 因 此 , 由 柯 尔 莫 戈 洛 夫 “0-1” 律 (第 四 章 {1 定理 1) 知 , 概率 P{z ; 
zoo < оо} 只 有 “0 或 1” 两 个 可 能 值 . 于 是 , 根据 定理 2, ЖД Р<Р,ЖДР1РО 

З. 测度 的 绝对 连续 性 和 奇异 性 与 “可 预测 性 ” 下 面 的 定理 用 “可 预测 的 ” 语 
言 ， 给 出 绝对 连续 性 和 奇异 性 的 准则 . 


定理 4 APP, 


а = 2.294; п> 1, 


其 中 zo=1. ЖА (Fo = (2.0}), 


Р «Рева — E(VanlF n-1)] < =] =1, (16) 
п=1 
РІ рев — E( Vanl Я n-1)] = =1. (17) 
п=1 
证 明 因为 
Bm =0=/ вар =0, 
所 以 (P — а.с.) 


= 站- 人 oo (18) 

k=l k=1 

在 (3) RPR A= {z = 0}, 得 B{zw = 0} = 0. 因此 , 由 (18) R, (Р-ас.) 有 
{же < оо} = {0 < Zæ < оо} = {0 < limzn < оо} 


= f- < im но <. (19) 


k=1 
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= k || < 1, 


sign z, |т|>1. 


f-o < im Xmas <o} = f-o < im X ulinan) < oo}. (20) 


k=1 k=1 


以 Е ЗГЕ Р 的 数学 期 望 , 而 7 Я, 可 测 可 积 随机 变量 . 由 条 件数 
学 期 望 的 性 质 知 (练习 题 4)， 


2 1В(1 „-1) = Е(п2,|Я n-1)(P - ЖР -а.с.), (21) 
EMF n1) = 29 Enn Я и) (Р ас). (22) 


注意 到 , an = 29 izn, 由 (22) 式 得 “条 件数 学 期 望 的 换算 公式 ”的 如 下 重要 变 式 (第 
二 章 87 的 (44) 式 ): 


EMIF „-1) = Е(а,т 1) (BP—ac). (23) 


特别 , 由 (23) 式 可 得 
E(an| Fn_1) =1 (Б-а.с.). (24) 


由 (23) 式 , 有 
Е[и(иа„)#„-—1] = Е[а„щ(шо„)# n-1) (P — a.c.). 
因为 对 于 一 切 z > 0, 有 zu(lInz) > 2-1, 故 由 (24) R, 有 
Еи(та»)|Я n-1] > 0 (Б-а.с.). 


由 此 可 见 , 随机 序列 X = (Xn Я n), 其 中 


Xn = Уд), 
k=1 
关于 测度 Р EFH, Н |АХ„| = | (пак) < 1. 
那么 , 根据 85 的 定理 5 (Б - a.c.) 有 


{= < = Уно) < =} 
k=1 


= {È Banas + и? (lnak) 6-1] < =] А (25) 


k= 
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这 样 , 由 (19), (20), (22) 和 (25) 式 , (È -ас) 有 
k=1 


{гоо < оо} = {È Binas +ч?(шак)|# к-1] < =} 


= {5 Е[аки(ш ак) + оки?(1п ор) ь-1] < =} Я 


k=l 


从 而 , 由 定理 2, 有 
P<PoP [È Bouman + аки? (шок) 1] < =] =1, (26) 
k=1 
PlP2P {> Е[оки(Іпок) + аки? (пак) к-1] = =} =1. (27) 
k=1 


现在 注意 到 , 由 (24) 式 , 有 
Е[(1- уак) 12-1] = 2801 — уок -1) (Б -ас.), 
且 对 于 一 切 x > 0, 存在 常数 4 和 В(О <А < В < оо), & 
А(1 — VT)? < тахт) + ти (ах) +1- z£ < В(1- vT}. (28) 
于 是 , 由 (26), (27) 和 (24), (28) R, 得 结论 (16) 和 (17) 式 . 
ЖІ НЯ БСР, AEE n >l, о RE olan) 和 .Fn-1 (关于 测度 也 
(A Б) жа, U PP ҖР1Р 两 种 情形 必 有 一 个 并 且 只 有 一 个 成 立 . 这 时 
互 <P 人心 Уп в/о, 
т=1 
РІР% pl ат = oo 
т=1 
特别 , 对 于 角 谷 的 情形 ( 见 定理 3), am = qn 而 
P&P JU [1-EVqn(zn)] < оо. 
т=1 
PlPs Уп — EVan(zm)] = оо. 
т=1 
Ж2 ИРХР, А 


Рў E(am Inam! Я т-1) < =} =15Р «Р. 


т=1 
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为 证 明 , 只 需 注意 到 , 对 于 任意 > > 0, 有 
zlnz + 50-0) 21-25, (29) 


并 利用 (16) 和 (17) 式 . 
Жз 因为 (BP 一 a.c.) 非 负 项 级 数 


ос 


У1-Е(/91.-1)) 与 УЕ n-i) 


n=l n=l 


варка Ж. 则 定理 4 的 论断 (16) 和 (17) 式 可 以 写成 如 下 的 形式 : 


вере {Sling <=} = (30) 

п=1 

Барево) =1. (31) 
п=1 


жа 设 存在 常数 0< A4<1 和 B>0, 使 
Р{1-А<о„<1+В}=1, п>1. 
那么 , ЖБ <Р, 


Р«Р+Р (ви — т)? n-1) < =} =1, 
п=1 


Р ip ow ва оя) -=} =1. 
п=1 


为 证 明 , 只 需 注意 到 , 对 于 ze 1-А,1+В),0< А<1Ж В 0, Е Ж с 
Ж С(0<с<С < оо), № 


(1-1) < (1 Уз)? < С(1- =)?. (32) 


4. BPA- 费 里 德 曼 择 一 性 ”假设 5 = (&1,62,…) 和 = (6,6) 是 两 个 
高 斯 随机 变量 序列 , 且 (在 第 2 小 节 的 记号 下 ) Р, ~ P,n > 1. RANAH, 对 于 这 样 
的 序列 , 如 何 由 上 面 得 到 的 “可 预测 ”准则 , 得 出 “ 哈 伊 克 — 费 里 德 曼 (J. Најек Н. 
М. Friedman) 择 一 性 ": 户 ~ 忆 或 户 1P 二 者 必 居 其 一 . 

根据 正 态 相关 定理 (第 二 章 813 定理 2)， 条 件数 学 期 望 Elan Bni) 和 
lenni) 是 z1,… ,zn_1 的 线性 函数 , 其 中 Е 和 Ё 相应 为 对 测度 已 和 Р ЖЖ 
学 期 望 . 以 oo_i(z) 和 й„_1(х) 分 别 表示 这 些 (线性 ) 函数 (ao(z) = ao 和 ao(z) = ão 
是 常数 ). 记 


bn-1 = (Elzn — ал-1(т)]?)!/?, 


bn-1 = (В, — @—1(ш)]?)!®. 
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根据 上 面 提 到 的 正 态 相 关 定 理 , 存在 均值 为 0、 方差 为 1 的 , 高 斯 随机 变量 序列 
e = (e162,…) 和 = (#1,ё›,---), 使 得 (P — a.c.) 





én = an-1(€) + 加 -ln 


& = ün-1 (Ë +5, 1. 89 


注意 , E bni =06,_, = 0) 情形 下 , ЈАВЕ ЯРЧЕ е (2), 一 般 不 得 不 扩充 
概率 空间 . 不 过 , 假如 bni = 0, 则 随机 向 量 (z1,… ,zn) 的 分 布 (P 一 a.c.) 集中 在 线 
性 流 形 zn = an_1(z) 上 . 因为 根据 假设 Р, ~ Pa, ЭНА bni = 0,an_i(z) = йл—1(ж) 
和 an(z) = 1 (P- 及 P- ac.) 因此 , 不 失 普遍 性 可 以 认为 , 对 于 一 切 n > 1, 有 
0 > 0,02 > 0, 因为 在 相反 的 情形 下 , 和 式 


Me 


1 — Е(Уа»|-Я„-1] 


n 


中 相应 项 的 “贡献 ”等 于 0 ( 见 (16) АЖ (17) R). 
利用 高 斯 性 假设 , 由 (33) 式 可 见 , 对 于 n>1, 有 


一 2 itn- in- 2 
позво а ав + [г A 1(2)] р (34) 





其 中 = [bn Ља), 而 


ao = Ей, йо = Её, 
= реа, = ра. 











由 (34), 有 
> 2 
InE(al/?|.2,-1) = 3 EE = Kan (осанке А 
< 241 <o 
1+0, ^ 
则 (30) 式 有 如 下 形式 
8 js/ |1 1+. dı (аһ-1(2) –йһ-1(2)\* _ 
Fero8 {Sli а +a Бан ) < oo = 1. 
І (35) 
由 于 级 数 
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或 者 同时 收敛 , 或 者 同时 发 散 , 则 由 (35) 式 可 见 


(Gey (8 )) <=} i 
bn № Е 


ДЭ а 


п=1 

















中 Д, (2) = ал(т) — а, (2). 


因为 os(z) а(х) 是 线性 函数 , 所 以 随机 变量 序列 {А (2) 76, про ( 既 关 于 测 
Ж Р, 也 关于 测度 Р) 构成 高 斯 系统 . 由 下 面 将 要 证 明 的 引 理 , 可 见 


PID ($A) <o} a(o 


(37) 
从 而 , 由 (36) 式 , 可 见 


Perey 


n=0 





AD (ү 
TES ве 


类 似 地 , 可 得 





eÈ a( ау о 


由 此 可 见 , 如 果 测 度 P 与 РЕЯ, 则 Р < Р. 因为 根据 假设 Р, ~ Pn > 1 
所 以 由 对 称 性 知 P < Р. 于 是 有 下 面 的 定理 . 


定理 5 (НЯ - 费 里 德 曼 择 一 性 ) 设 &=(&1,62,…) 和 8= (ee 是 
两 个 高 斯 随机 变量 序列 ， 且 其 有 限 维 分 布 等 价 : ~ Pan > 1 ЖА, Ро Р 
巨 上 已 二 者 必 居 其 一 . 这 时 


5 <. [= (2, (2)\? [в ү" 
РР» Е | 一 一 = -1 ‚ 
Е(®)-(@ )]<< 
А2: (38) 
5 = дауу (№ ) 
PLP (==) + ш = оо. 
Skea (8-3) | -= 


38 p= (Bn)n>1 ARIE (Q, F, P) 上 的 高 斯 序列 . ЖА, 


ЭЗЕ 
n=1 


(39) 


1 
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证 明 蕴涵 关系 (<) 显然 . 现在 假设 E82 = 0,n > 1, 并 证 明 蕴涵 关系 (>). 为 
此 , 只 需 证 明 


оо оо -2 
еу © [eov (5) & (40) 
п=1 


т=1 


因为, 由 PAX < ос) > 0 条 件 可 见 , (40) 式 的 右 侧 小 于 оо. 即 55 EA < co, 而 
由 已 证 明 的 蕴涵 关系 , 可 见 Е 


[я < =} =1. 
п=1 


固定 某 一 n > 1, 则 由 第 二 章 811 和 513 知 , 存在 独立 高 斯 随机 变量 Bk,(k = 
1……,r 和 mn), 且 了 Bkn = 0, 使 得 


Èa) = En 
如 果 记 ЕВ „ = Ак, 则 易 见 
ву, =) Ул (41) 
而 т r 
Eexp (- Eata) = Пе +2№„)- 2. (42) 


比较 (41) 和 (42) 式 右 侧 , 得 
п т т -2 n -2 
EJ =Еў) 8, < Е (5) = [ee (=>) ， 
k=1 k=1 k=1 к=1 


由 此 , 当 п 一 оо 时 经 极限 过 渡 , 得 所 要 证 明 得 不 等 式 (40). 

现在 假设 Ев, #0. 

考虑 与 8 = (B,)nz1 独立 并 且 具 有 同一 分 布 的 序列 = (8) >а (必要 时 扩展 原 
概率 空间 ). 那么 , 如 果 


„|=. <=} >0, W Рл -ay <= >0, 


n=1 n=1 


县 由 已 经 证 明 的 , 有 


2》 Е(8„ — Eba)? = у Е(8„ — В»)? < оо. 
= = 
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因为 
(Epa)? < 282 +2(8, - Ев,)?, Ш У (Е8,)? < о. 
п=1 
于 是 ， 


Y E8 = 六 po = Ув, ЕВ»)? < оо. о 
п=1 


п=1 

5. Я 我 们 继续 讨论 85 第 3 小 节 的 例 . 假设 боб, 是 独立 高 斯 随机 变量 
序列 , ВЕ, = 0, ОЕ, = Vi > 0. 

仍 设 

Хы =0@ӨХһ„+& +, n>0, 

其 中 Xo = £o, 而 0(-оо < 9 < оо) 是 待 估计 未 知 参数 . 设 0, 是 用 最 小 二 乘法 得 到 
的 估计 . 

定理 6 序列 后 (n > 1) 是 强 相合 估计 的 , 充分 和 必要 条 件 是 : 





= (43) 
+ V, 


证 明 ХАН. 当 未 知 参数 的 值 为 9 时 , 以 Po 表示 (R®, 8) 上 对 应 于 序列 
(Хо, Хо, ---) 的 概率 分 布 ; 以 Eo 表示 对 测度 Ро 的 数学 期 望 . 
我 们 已 经 知道 ， 
б, =? ЭЕ, 
е (M)n’ 
其 中 | E 
SS Хабы ` 
Мт >. Ук” ке Dui и. 
根据 上 一 小 节 的 引 理 
Po{(M)w = оо} = 1 & Ев (М) = оо. 
从 而 (M)。 = оо (Ре — а.с.), 当 且 仅 当 
< EX? _ 





(44) 


> Ин 


而 且 


EoX? = Den- А 
ЕХ} 21 2k Vi-k 
их (б > Хет 
> + 3 : (45) 
V+ Е 
k=1 и. 


i=0 i=k 











S7. 随机 游 动 越 出 曲线 边界 的 概率 的 渐 近 式 .177， 














因此 由 (43) 式 得 (44) R, 而 根据 定理 4, 对 于 每 一 个 9, 估计 后 (n > 1) 序列 为 强 相 
合 的 . 

必要 性 假设 对 于 一 切 9, Po(B 一 0) = 1 现在 证 明 , 假如 Ө, # 92, 则 Po， 
和 Ро, ЖАНР (Ро, L Po). 事实 上 , 由 于 (Хо, Xi) 是 高 斯 序列 , 则 根据 定 
理 5 测度 Po ЖР, 要 么 奇异 要 么 等 价 、 然 而 测度 Po, A Ро, 不 可 能 等 价 , 因 
为 , 假如 Po, ~ Ро, 但 是 由 于 Po (Ôn 一 01) > 1, W Pon 一 б) = 1. 而 由 于 
Р,,(0, — 02) = 1, 故 应 该 91 = 05, 而 这 与 假设 0, 7 0 矛盾 . 
于 是 , 对 于 0, Я 92, Po, 上 Po. 
根据 (38) R, 对 于 Ө, #0,, 有 





x? 
Po, L Po, © (61 — 65)? Ув, (8) = оо. 


设 0 = 0 ЖП 9, 70, ШЕН (45) 式 得 


Po L Po, + 
0 0; Ўт 让 
于 是 , 这 就 证 明了 必要 性 . 口 
6. 练习 题 
1. 证 明 等 式 (6). 
2. Ж Р, ~ Pan >1. 证 明 


P ~ P = Р{2 < œ} = Р(2 > 0} =1, 
БІР Р{ 2 = оо} = 1  Р{ 2. =0} =1. 


3. ЖР, «Р,,п>1, Шт (Ж (Я „)) 是 停 时 , Р, = PF, МР, = PF, 
EWR P A P 到 c- 代数 Я, 的 收缩 . ШЕЯ Р, < P, 当 且 仅 当 {т = оо} = {zo < 
ФР — а.с.). 特别 , 如 果 P{r < оо} =1, МР, < P,. 

4. 证 明 “换算 公式 ”(21) 和 (22). 

5. 证 明 不 等 式 (28), (29), (32). 

6. 证 明 公式 (34). 

т. 假设 在 第 2 小 节 中 , 序列 5 = (&1,&2,…) 和 = (&,&,---) 由 独立 同 分 布 随 
机 变量 构成 . 证 明 , 1) WR Р; < Pe, ШР <Р, 当 且 仅 当 测度 Pa = Pe; 2) 如 
ЖР «Ре НР; # Pa, N PLP. 
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1. 概率 Ptr > п} WAER B Ei 是 独立 同 分 布 随机 变量 序列 , Sn = 
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& +-+ Eni 9=9(п), п > 1,9(1) < 0, 是 某 一 “边界 ”; 而 
T=inf{n>1:5, < 9(п)} 


是 随机 游 动 (Sn)n>1 首次 处 于 边界 g = g(n) 以 下 的 时 间 . ( 像 通常 一 样 , 如果 {} = ©, 
则 认为 = оо). ЖЯ] > 的 分 布 是 相当 困难 的 .在 这 一 节 , 对 于 广泛 的 一 类 边界 
g = g(n), 并 且 & 在 服从 正 态 分 布 的 条 件 下 , RH п 一 оо 时 概率 P{r > п} 的 渐 近 
R. 所 用 方法 基于 “测度 绝对 连续 替换 ”的 思想 , 并 且 利用 前 面 介绍 的 蒜 和 马尔 可 夫 
时 间 的 一 系列 性 质 . 

ЖЕ itinin 是 独立 同 分 布 的 随机 变量 , & ~ N(0,1)， 假设 边 界 g = 
gln) 满足 条 件 : g(1) <0, вт n> 2, 





0 < Ag(n+1) < Ag(n), @) 
其 中 Ag(n) = 9(п) - g(n - 1), 并且 

Inn=o (Saw) поо. (2) 

Pfr > n} = exp {+ Lawa + oan} ‚о пә. (3) 


在 进行 证 明之 前 , 我 们 首先 指出 , 条 件 (1) 和 (2) RX, 例如 , 若 
g(n) = ап” +b, 1<и<1, a+b<0, а>0, 
或 者 (对 于 充分 大 的 n) 


5 </<1, 
其 中 Lin) 是 某 一 缓慢 变化 的 函数 (例如 , Lin) = Clnn)’, 对 于 1/2 <и <1, p 是 
任意 的 , 而 对 于 v= 1/2,C > 0,8 > 0). 

2. 定理 1 的 证 明 在 证 明定 理 1 时 用 到 下 面 两 个 辅助 命题 . 

假设 &1,€2,… 是 独立 同 分 布 的 随机 变量 序列 , є, ~ N(0,1). 引进 记号 : Fo = 
{2,9}, F n = 0 {£1 Enh}, ШВ а = (an, Я n-1) 是 可 预测 序列 , 且 P{lan| < С} = 
ln > 1, 其 中 C 是 某 一 常数 . 建立 序列 = (zn F n), 其 中 


n 1 
5 5а 1380 ‚ п>1. (4) 
к=1 к=1 


不 难 验证 , 序列 (关于 测度 P) 2 = (2..7 n) ER, Н Ezn =1,п >1. 
ЖЖ п > 1, 并 且 在 可 测 空间 上 (9,.2n) 引 进 概率 测度 Pn: 


Б»(А) = ВЕГА), АЕ. © 


9(п) = an” п), 
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引 理 1 (“ЕЖЕ (И. Гирсанов) 定理 ”的 离散 变 式 ) ”随机 变量 & = 
&&—о,1<К<п,‚ 关于 测度 已, 独立 且 服 从 正 态 分 布 Ek ~ N(0,1). 
证 明 设 Е, 表示 对 测度 P, 的 数学 期 望 , 则 对 于 Xk <e R,1 < k<n, 有 
En exp (5л) = Еехр ма) 
k=1 
exp Da >В [ер (в. 一 an) + anén 一 =) |=.) 
k=1 2 
ах х x 1 
=E oo ма) —-° СЕ a}. 
| >: 7593 1 { 2 } 5х к 


TE, НЖ $12 定理 4 得 所 需要 证 明 的 结论 . 口 
582 &Х=(Х„,.#Ў„)„»у 是 均值 为 0 ИЖ, п 


=Е 





o =inf{n >1: Xn < —b}, 


其 中 常数 b> 0. 假设 
P{X1 < —b} >0. 


ЖА, 存在 常数 C > 0, 使 对 于 一 切 n > 1， 


P{o >n}> т. (6) 
证 明 根据 82 定理 1 的 系 1, ЕХ, „ = 0, 由 此 可 见 
—El(o <m)Xo = ЕЦо > n)Xn. (7) 
在 集合 {o <n} E, 有 
-Xs 2b>0. 
因此 , 对 于 ”> 1 
-El(o <п)Х, > bP{o < n} > bP{0 = 1} = bP{X < —5} > 0. (8) 


另 一 方面 , 由 于 可 西 - 布 尼 亚 科 夫 斯 基 (А. L. Cauchy - А.Я.Буняковский) 不 等 式 ， 
可 见 
El(o > n)Xn < [P{o > n} - EX3)". (9) 
FE, 由 (9) 式 及 (т) 和 (8) R, 所 要 证 明 的 不 等 式 (6), 其 中 С = [bP{X1 < —5}]?. 
证 明定 理 1 只 需 证 明 : 


шарі > п}/ У ЛАЯ > -i (10) 
хл k=2 
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йш!аР{т > n}/ Узлы < 到 a) 
为 此 , 考虑 ( 非 随机 ) 序列 (an)n>1 , 其中 
a1=0,， an=Ag(n), п>2, 
而 概率 测度 (Р) а> 决定 于 (5) А. WA, RERE (O. L. Hilder) FER, 有 
Р, {т> п} = Ет > п)г„ < (Р{т > п})!/4(ЕгР)!/Р, (12) 


其 中 p>1 和 g=p/(p 一 1). 
(12) 中 最 末尾 一 个 因子 的 明显 表达 式 为 : 


(Ем = wfe Lawr}. аз) 
现在 估计 (12) 式 左 侧 的 概率 Ba{7 >п}. 有 
Б, (т> п) = Р„{5 > g(k),1 < k < п} = Р„{5% > 9(1),1 < k <n}, 


其 中 3% = >& È = G а. 根据 引 理 1, 随机 变量 £ En 关于 测度 Р„ 独立 
ГЕРУ еЗ & ~ №(0,1). 将 引 理 2 用 于 b= -9(1), Р = Pn, Xn = 5%, 得 





Р,{т>п}р> ©, (14) 
其 中 C 是 某 一 常数 . 
WA, 由 (12)~(14) R, 可 见 对 于 任何 p> 1, 有 
P{r>n}> сек Yao --2 д n} 7 (15) 
其 中 Cr 是 某 一 常数 . 鉴于 定理 的 条 件 和 p > 1 的 任意 性 , 由 (15) 式 得 的 下 侧 估计 


(10). 
为 得 到 (11) 式 的 上 侧 估 计 , 首先 注意 到 由 于 z > 0 (P- В.Р a.c), 则 由 (5) 
式 可 见 
Р{т>»п} = Вт > n)a’, (16) 
其 中 Е, 表示 对 测度 B 的 数学 期 望 . 
对 于 现在 考虑 的 情形 , a = 0, an = Ag(n), п > 2, 因此 对 于 п > 2, 


== af- Ул. &+5 ЭЭ! Ag(k)] 中 


k=2 
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由 分 部 求 和 公式 ( 见 第 四 章 83 引 理 2 的 证 明 ), 得 
PAs) = Аб): Sa - 3 59-140) 


由 此 并 注意 到 , 根据 定理 的 条 件 Ag(k) > 0, AlAg(k)] < 0, 可 见 在 集合 {r > п} = 
{Sk 之 g(k),1<k<n} 上 ,有 


Уан k) -£k > Ag( - 9(п) – У glk – 1)А|До(Е)] – &А9(2) 
k=3 


= Dj[Ag(K)]? + 9(1)Ag(2) – SAg(2). 


k=2 


因而 , 由 (16) 式 , 有 


Р{т> п} < СЕ рэ —4(1 jasa} Ën I(r > nje a0 


= exp{-g(1 а аю) Ё, (т > п)е- 62909), 
k=2 

其 中 

Б„т > п)е- 1492) < Б е-@49@ = ке-@4А9@) < оо, 
因此 ， 

P{r>n} < Сехр Е Ули) ; 
к=2 
其 中 C 是 某 一 正常 数 , 于 是 证 明了 (11) 式 的 上 侧 估计 . 
3. 双 侧 界限 的 情形 “测度 绝对 连续 替换 ”的 思想 , 亦 可 对 于 双 侧 边界 的 情形 ， 

研究 类 似 的 问题 . 我 们 (不 加 证 明 地 ) 给 出 这 一 方向 上 的 结果 之 一 . 


定理 itini o 是 独立 同 分 布 的 随机 变量 序列 , 5i ~ М(0,1). 假设 f = 
fn) 是 正 值 函数 ,满足 条 件 : 


f(n) = оо, n= oœ, 


Fara =o (г) , по 
к=2 k=1 


那么 , 如 果 
в = inf{n > 1:15n| > f(n)}, 


P{o > п} = {Ув +e}, п 一 оо. (17) 
k=l 
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4. 练习 题 

1. 证 明 由 (4) АЕ. 问 在 不 要 求 条 件 P{lan| <c= 1,n > 1} 成 立 
的 情况 下 , 这 是 否 成 立 ? 

2. EHAR (13). 

3. 证 明 公式 (17). 


§8. 相依 随机 变量 之 和 的 中 心 极限 定理 


1. 函数 的 中 心 极限 定理 ”在 第 三 章 84 中 , 我 们 对 于 随机 变量 Ein, Enn 之 和 
Sn = in 十 … 十 Enn(n > 1), 证 明了 中 心 极限 定理 , 当时 假设 ，&1%,… ,Enn 相互 独立 ， 
ЯГ, 以 及 各 被 加 项 的 极限 可 忽略 性 . 在 这 一 节 , 我 们 将 不 再 假设 满足 独立 
性 条 件 , 甚至 也 不 再 要 求 一 阶 绝对 矩 有 限 . 不 过 , 仍然 假设 被 加 项 的 极限 可 忽略 性 . 
这 样 , 假设 在 概率 空间 (QF, P) 上 给 定 随机 序列 


E = (En Fk) 0<К<п, nèl, 


其 中 Eno = 0,90 = {2,9} Я SF ka СЯ (k+1 <n). ® 


Ш 
Xr = én 0161. 
大 =0 


定理 1 设 对 于 固定 的 0<t< 1, 满足 下 列 条 件 : 对 于 任意 = (0, 1], #п оо 
时 ,有 


[nt] 
(А) Уре > 1971) 5 0, 
к=1 
үм] 
(В) УЕБ (161 < 19751) Т 0, 
k=1 
p n P 
(©) УО вы! < EF 5 оў. 
k=1 
那么 


X? 二 N(0,02). 
注 1 Ж (А) 和 (В) 保障 随机 变量 X 可 以 表示 为 


[nt] 
хр=үҮ +2, 1020 50, YP = у тм, 
к=0 
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其 中 序列 п" = (пак, F k) ER — ЭЕ Вик 1) =0 其 中 对 0<k<n,n>1 一 臻 
Inkl < с. 因此 (在 所 考虑 的 条 件 下 ) 定理 的 证 明 实际 上 归结 为 , WRR - 差 序列 的 
极限 定理 的 证 明 . 

对 于 随机 变量 в, ,énn 独立 的 情形 , 条 件 (А), (В) 和 (С) 当 t = 1 时 就 是 条 
(Е (02 = оў): 


(а) Ур >} 0, 
k=1 

(b) У ЕЕ < є)] > 0, 
kal 

(с) Урі < =)] > о. 
k=1 


这 由 格 涅 坚 科 (Б. В. Гнеденко) 和 柯 尔 莫 戈 洛 夫 的 专著 [16] 是 熟知 的 . 因而 
由 定理 1 得 如 下 推论 . 

Я 如 果 6in,… ,Enn(n 之 1) 是 独立 随机 变量 , 则 

(а), (b), (© > Хр = Ув S N(0,0°). 
kul 

2 ЖЖ (C) 中 不 排除 o? = 0 的 情形 . 这 样 , 定理 1 中 也 包括 收敛 于 退化 
分 布 的 情形 (хр ® о). 

Жз 用 定理 1 的 方法 可 以 表述 和 证 明 更 加 一 般 的 命题 . 

假设 0<t сьс < tj < 10 SOn < … < ony, W ern ,ej 是 均值 为 0 
的 独立 高 斯 随机 变量 , Н. Ee? = o? – о2 ,. 建立 高 斯 随机 向 量 


(Wastes Wu) Wau = +. к. 


假如 条 件 (A),(B) 和 (С) #4 + =t stj 时 成 立 , 则 随机 变量 Хр, о, Хр 的 联 
合 分 布 PR. ,能 收敛 于 随机 变量 (Wi,，… ,Wi,) ВМА Parot Pho № 
Р... 
#4 H (02)оссі 是 连续 不 减 函数 , оў = 0. UW = (И ось 表示 布朗 运 
动 过 程 ( 维 纳 过 程 ), 且 EW, = 0,EW? = o?. 在 第 二 章 813 中 对 于 o? = 上 定义 了 该 
过 程 . 在 没有 这 一 条 件 的 情况 下 , 该 过 程 可 以 类 似 地 定义 为 , 具有 独立 增 量 的 高 斯 过 
程 W = (Ti)ostsi В. Wo = 0, 而 其 协 方差 函数 为 r(s,t) = min(o?2,0?). 在 随机 过 程 
的 一 般 理 论 中 , 证 明 具 有 连续 轨道 的 这 样 的 过 程 总 是 存在 的 . ( 当 о? = t 时 这 样 的 过 
程 称 为 标准 布朗 运动 ). 

如 果 以 Р" 和 PRRI X” AW 在 函数 空间 (D,. 多 (D)) ( 见 第 二 章 82 第 7 
小 节 ) 中 的 概率 分 布 , 则 可 以 断定 : 对 于 一 切 0 << 1 成 立 的 条 件 (А), (В) 和 (С), 
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不 仅 可 以 保证 上 述 有 限 维 分 布 的 弱 收 敛 (Pr > Ptyti<to < Аы 
6) = 1,2,…), 而 且 也 保证 函 教 的 收敛 性 , 即 过 程 X” 的 分 布 Р" 弱 收敛 于 过 程 W 
的 分 布 P. (有 关 细 节 , 参见 [5], [91], [87]). 这 一 结果 , 一 般 称 做 函数 的 中 心 极 限定 理 ， 
或 者 (对 于 п > 1, 当 随机 变量 iin, ,énn 独立 时 ) 称 做 ( 汤 斯 饥 [М. Donsker] – 普 
BEDR) 不 变 原理 . 

2. 一 致 渐 近 可 忽略 性 

定理 2 (1) 条 件 (A) 等 价 于 一 致 极限 可 忽略 条 件 (一 致 渐 近 可 忽略 性 ) 


ах |Enk| = 0- 


(a) m 
1gkg[nt] 
(2) 在 条 件 (А) 或 (A*) F, 条 件 (С) 等 价 于 条 件 
[nd 
(С) E Ene = Вы < DIFE] 2, о}. 


((A*) 和 (C*) 中 与 (A) 和 (С) $ t 的 值 相 同 .) 
定理 3 ”假设 对 于 每 一 个 n>1, 序列 


E = (EnF k) O<k<n, 


是 平方 可 积 著 一 Ž, №№ БО, < о, Е (к) = 0. 
假如 满足 林 德 伯 格 (J. W. Lindeberg) Ф: 对 于 任意 < > 0, 有 


[nt] 


(D) Уе > 191] 7 0. 
к=1 
那么 , 条件 (C) 等 价 于 条 件 
(Xh 5 оў, (1) 
其 中 
[nt] 
(Х"), = у EERI k1) 2) 
К=1 
是 二 次 特征 , ЮЖН (С°) 等 价 于 条 件 
Do 5 оў, (3) 
其 中 
[nt] 
1х" = уе, (4) 
k=1 
是 二 次 特征 . 


由 定理 1~3, 得 下 面 的 定理 . 
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定理 4 假设 对 于 平方 可 积 著 - 差 6" = (Enk,FR),n 之 1 和 (对 给 定 的 0<t< 
1), 满足 条 件 林 德 伯 格 (1), ЖА, 

La P d 

УЕ) 5 o? = XP 5 N(0,0?), 6) 

k=1 
[nt] 
De D o? = XP № м(о,оў). (6) 
k=l 


3. 定理 1 的 证 明 1) 将 Xr 表示 为 如 下 形式 : 


м] [nt] 


XP = Увы Ен < 1) + ÈO вк Е] > 1) 
k=1 k=1 


т) [nt] 
= Е (61 < DIF k-i) + У (6 > 1) 
kal к=1 

[nt] 


+F Чень (к < 1) — Ель] < DIF ви}. (7) 


k=l 


Int) 
Br = у Ек] < DIF 小 
К=1 


и (Г) = (ек є Г), (в) 
УКГ) = Рек ЕТ, 


其 中 г 是 属于 集 系 4 生成 的 最 小 c- 代数 Bo = olo) 的 集合 , 而 № Ж 
Ro = В\{0} 中 有 限 个 形 如 (a,b) (FARA {0}) 的 、 不 相交 区 间 之 和 形成 的 集 系 ; 
P(enk ETl Я) 是 Enk 关于 o- 代数 Як, 的 正则 条 件 分 布 . 

那么 , (7) 式 可 以 写成 





г] [nd 


Xr=Br+ >] тар + У/ тЧ(иў 0). (9) 
k=1 {lzl>1} k=1 0181 


<1) 


表达 式 (9) 称 做 序列 (ХР, h) 的 典范 分 解 式 . (所 有 积分 应 理解 为 对 于 每 一 个 基 
本 事件 由 定义 , 勒 贝 格 一 斯 蒂 尔 切 斯 积分 .) 
根据 条 件 (B), Br 三 , 0. 现在 证 明 , 由 于 条 件 (A), 有 


[nt] 


L / аіди? 2 0. (10) 
1/1} 
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[т] [nt] 


у zld = У EnxlI(lénk| > 1). 
У faoa" к >! к\Т(|&һк| > 1) 
对 于 任意 5 (0,1), 


=1 


显然 
м] 
Ў иы >= эи аид (= Uga). 


(1121) 
由 条 件 (A), 有 


[nd 
у= У ] dvg 2.0, 
10080 


FE ил, 是 Fpi- 可 测 的 . 
那么 , 由 83 定理 4 的 系 , 有 


у E0 = Ugg №0. 
注意 , 由 83 定理 4 的 系 , 以 及 不 等 式 Apy < 1, 有 相反 的 蕴含 关系 


Р: Р 
Шы > 0 = Vg №0, 


这 在 证 明定 理 2 时 将 要 用 到 |. 
由 (11)~(14) 式 的 所 要 证 明 的 (10) R. 
这 样 ， 
ХР? =Ү>+2р, 
其 中 Б 
5 faen” ас 
而 


Int] 


z=B +} 1 здр" Р. 0. 


>} 


2) 由 于 练习 题 1, BETLAR KAE ХР -> (0,02), 只 需 证 明 


үг 4 М(о,о?). 


[nt] {nt} 
[еы >1)> \ с [еы >1)> | 
к=1 


(1) 


a2) 


(13) 


(14) 


(15) 


(16) 


ат) 


(18) 


(19) 
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把 Yr 表示 为 (ee (0,1) 


УГ = (8) + Ара), 
其 中 


[nd 
©, = и 
Vinel )= È сысы” а(ик к), 


[nt] 
аме = J за 00), 
{lzige} 


像 (10) 式 的 证 明 一 样 , 由 于 条 件 (A) 容易 证 明 тр (е) 三 0,n 一 o0. 
序列 A" (e) = (AR(e),FR),1 < К< п АНЯ, 且 具 有 二 次 特征 


ei w- (aa) 


Ев < 19781). 


(20) 


(21) 


k 
(дек = У 
© 
p 

由 于 条 件 (C), 有 


(А"(е)) а = оў. 
从 而 , 对 于 任意 = є (0,1] 


maxf7pa(s), КА 
根据 练习 题 2, 存在 数列 en |0, 使 


"()) һа — 02) 5 0. 


праб) 250, (Ar(en))md => оў. 
因此 , 仍然 由 于 练习 题 1, 只 需 证 明 ， 


мы > 00,02). (22) 
其 中 


мр = AR(en) = > J 


zalu? — vp). 
{lzlgen} 
假设 对 于 T e Bo, 


(23) 


(Г) = КАМ} ET), (Г) =P(AMR Е ГЫ Е 1) 
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是 正则 条 件 概率 , AM? = MẸ Мр ‚к > 1, M8 = 0. ЖА, УЖ М" = 
(МЕ, Я), 1 < к< п, 显然 可 以 写成 下 面 的 形式 : 


k k 
Me = DAM =>. di 
і=1 


i=1 (1=1<2=,) 
(注意 , 由 于 (23), 可 见 [AMP] < 2en.) 
З) 根据 第 三 章 83 定理 1, 为 证 明 (22) R, 需要 对 于 任意 实数 , 证 明 


2,2 
КЫ 








Ee Мн етт, (24) 
记 k 
т _ idz _ т 
с = ше 1)477 
т 大 
gr(G")= Ца +467). 
ј=1 
注意 到 
1+AGR=1+ |, (ее — паж = E(e AME FR), 
{1215 2е„} 
从 而 
ERG”) = I EPS). 
j=1 
4) 根据 第 4 小 节 已 证 明 的 引 理 4, 为 验证 (24) 式 只 需 证 明 , 对 于 任意 实数 А, 有 
т) 
ыс") = | EE IE) > eA) >0 (25) 
j=1 
和 ao? 
[Shy( GW D e. (26) 
为 此 , 将 Bk(G") 表示 为 
k 
BR(G") = е Па + Асу)е-5©7. 
j=1 
(对 照 第 二 章 86 中 由 (76) 式 定义 的 函数 2,04). 


由 于 
/ тар = Е(АМ?}#?_,) = 0， 
{1®1<2є„ } 
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可 见 
k 
с" = т ii р" 
А > / ЮЕ; 1-паат. (27) 
从 而 ， 
2 2 
АС? < jet 1 ная < № АЕ Айсу 
| "<, пет ау 07 7090 0 (08) 
和 k 
入 2 
Ас < № = (Mk 
Ува < ED faa а = ум" (29) 
根据 条 件 (C)， 
(М")ьц 25 оў. (30) 
首先 , 设 (М) < a (Р-а.с.), Ж (28), (29) 式 以 及 练习 题 3, 显然 
Па+ларе-А9? 三 1，n 一 oo 
к=1 
因此 , 为 证 明 (26) 式 , 只 需 证 明 
入 2， 
с > -55 (31) 
或 (由 (27), (29) 和 (30) 各 式 ) 
т] 
Ar 
ем 1i) + ) ®о. 32 
X Jaat ER JA 的 
由 于 27: 2 3 
—-1- А+ Хз. < |ы, 
可 见 
[nt] 2.2 3 nd 
№27 | 2 М 2 
-1- ir + Зе х 2 айр 
ыгы “+ ее DY a “k 
3, 
= еам") < Мые >0, п оо. 





这 样 , 假如 (М") „ы < a (Р-а.с.), 则 (31) 式 成 立 , 从 而 (26) RERE. 
5) 现在 证 明 性 质 (25). 因为 


le —1—4Ат|< (Ах)? a 
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所 以 , 由 (28) 式 可 见 , 对 于 充分 大 的 n, 有 








к k м 
кс") = Па+аву] > Ц (1- ам) 
j=1 j=1 
к № 
= ш (1- лм"), ) 5. 
ехр |> п ( 2 ›) | 
而 (对 于 充分 大 的 n) 
2 
X (м) 
ш ( - м) > -2 2, 
-Z AM"); 


其 中 A(M"); < (22n)? | 0, п 一 оо, 因此 存在 no = по(А), 使 对 于 一 切 n > по(А), 有 
[BR(G™)| > етт, 


从 而 
#ы(С")| > еМ") > ела, 


FE, 在 (М") вы < а (Р-а.с.) 的 条 件 下 , 定理 得 证 ， 
6) 为 去 掉 条 件 (M")mkl < а (Р-а.с.), 我 们 作 如 下 处 理 , 设 


кн inf{k < [nt] : (Mn) >02 +1}, Я (М) 202 +1, 
BEJ E (Mn)md <0? +1. 


А, HF М" = мр. 有 
(М") ый = MndAr < 1+0? +23 < 1+0? +2є1(= а), 
且 根据 已 证 明 的 (I (24) R) 
Беа > ей. 
但 是 
lim [Ее Min — АМ у| < 2limP{r" < оо} =0. 


因此 ， 


> Dis м" ГАМ" ao? 
lim Ee My = lim E(e Mis — е Minn) + lim Ве АМ = етт, 0 
п n n 
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Ж 为 证 明定 理 1 的 注 2 中 提出 的 论断 , 需要 (根据 克拉 默 - 沃 尔 德 方法 回 ) 
证 明 , 对 于 任意 实数 和 1,… Aj, 证 明 


j 
Eexp f: [мы +} XGA 人 一 м.) } 
k=2 


2 (02 2 
в? Е „у 242). 


к=2 





该 式 的 证 明 与 (24) 式 一 样 , 只 是 用 平方 可 积 蒜 (Mr, Я) 代替 (Мр), 其 
中 
k 
Мр = uAM?, 
而 
n= Jòb Ë i< [тз], 
№, ж [ntk] <i < [nti], 2 <k <j. 
а. 辅助 命题 ”在 这 一 小 节 将 证 明 一 个 简单 的 引 理 , 它 可 以 将 验证 (25) RA (26) 
R, 归结 为 验证 (24) R. 
Жл" = (ља FR), 1 <k < п,п > 1 是 随机 序列 ,Y" = 》 mi 
=1 


8" (ху = П Е(е% FR), ЛЕВ, 


k=1 
Y 是 随机 变量 , 其 中 
8” (^) = ЕеАУ, ЛЕВ. 


引 理 ”如果 (对 于 给 定 的 入) EA) > c(A) > 0,n > 1, ЖЖ 


Бе?" — EeY (33) 
的 充分 条 件 为 收敛 
ФА) B (А). (34) 
证 明 设 елү" 
т”(^) = FO 
则 т (А) < c-!1(A) < оо, 且 容 易 验证 
Ет”(^) = 1. 


因此 , 由 (34) 式 以 及 勒 贝 格 控制 收敛 定理 , 有 
[Ее®Ү” — Беу | = |Е(е®Ү” — ZA) < |Е{т"(А)#" (А) -EN 
< КЛЕЯ” (А) 一 多 (A)| = 0, п— о. о 
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Ж 由 (33) 式 和 假设 | 多 "(A)| > elà) > 0, 可 见 多 (A) # 0. 实际 上 , 在 不 要 求 满 
ERI (Е (А) > (А) > 0 的 情况 下 , 引 理 的 论点 仍然 成 立 ; 具体 地 可 以 表述 为 : 如 
RE'O) DEO) EEA) 20, ИЖЕ (33) 式 成 立 (练习 题 5). 


5. 定理 2 的 证 明 1) 设 = > 0,5e (0,2), 并 且 为 简便 计 设 + = 1. 由 于 


тах |énk| 和 = 十 》 |6. Е > ©). 


<< 
1<А<пт Ea 


{ышы >є)> ‚} с {È reni >e) > ‚} А 


= k=1 


则 
P Í apax, Inel 2+8] < p {$ reui >=) >] -人 人 К -中 


k=1 к=1 


如 果 满 足 条 件 (A), 即 当 一 оо 时 


п 
Р [> / diẹ > } 一 0 
ET J{flzl>e} 


卫 Чик >ô —0. 
> ЕР } 
从 而 (А) = (A*). 


相反 , 假设 条 件 (A*) RE. 对 于 任意 = > 0, 设 


则 (对 照 (10) 式 ) 


max < 
оо, 若 max [6] 


= Е 

min {k <п:| |> =}, 车 max |6] 25, 

On = ` E 
2 


由 (A*) 式 limP{on < оо} = 0. 
我 们 现在 指出 , 对 于 任意 6 є (0,1), 集合 


пла» є Е 
| 1 (вым > =) >s} 和 {вак eul> 5) 
相等 , 而 根据 条 件 (A"), 有 


пла» nAon 


D i(i) (ШЕ 27 


к=1 
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因此 , 由 于 (15) <, 有 
пло, 2 naon ae Zao, 
>; Joss “k э ааа * 


由 该 式 连同 性 质 lim P{on < оо} = 0 最 后 证 明 列 涵 关系 (A*) = (А). 
2) 仍然 假设 t = 1. HERA e є (0,1), 对 于 任意 ô є (0,e], 考虑 平方 可 积 款 (I 


(21) 式 )， 














А") = (А06), 1), 1<к<т. 
由 于 条 件 (С), 对 于 给 定 的 se (0,1], 有 

(A"(e)n = оў. 
从 而 , 由 于 条 件 (А), 容易 导出 , 对 于 任意 ae (0,sj, 有 
(A"(6))n о. 


现在 证 明 , 由 条 件 (C*) 和 (А), 或 等 价 地 , 由 条 件 (C*) 和 (А*) 可 见 , 对 于 任意 


(35) 














бє (0, =], # 
[А" (б) > о, (36) 
其 中 
"(0)ln = У [101 < 6) = Ф|. 
1а") Sk вы] < 8) (ШЕП 
事实 上 , 由 于 (А) R, 容易 验证 ， 
[А"(6)), = APD] #0. (37) 
$ 2 се 2 
nk 一 Чир | —У]|&1(&1<1)- p 
È fe (ШЕ У еб (ШЕЛ 
z 2 С 
«Убе >) |е, аы» ШЕЛ; “] 
(38) 


п n 
<5ў`1 > 1) <5 2х [|| ди? Р, 0. 
< (lnk| > 1), < пах блк У еве ик 一 


k=l 


因此 , 由 (37) RA (38) RẸ (36) R. 
这 样 , 为 证 明 条 件 (С) 与 条 件 (C*) 等 价 , 只 需 证 明 : 在 (对 于 给 定 的 se (0,1]) 


条 件 (С) 满足 时 , 同时 , 若 对 于 任意 а > 0, ЖЕ (С°) 成 立 , M 














РА" — (А^(8))„| > а} = 0. (39) 
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记 m2(6) = [А"(б)]к — (AP (8))k, 1 < k < n. ВЈ т") = (т(б), Жк) 是 平方 
可 积 蒜 , 这 时 序列 (mm(5))2 被 序列 |А"(б)]„ Я (А"(5))„ 控制 (由 83 定义 ). 
显然 ， 
[т"(9) = У [Amg (8)]? < шах Amg (8)| х {[А"(б)]„ + (А”(6))„} 


Без 15<п 
<34*{[А" (8), + (А"(5))„}. (40) 


由 于 [А”(5)] 和 (Д”(5)) 相互 控制 , 故 由 (40) 式 可 见 ，(m”(6))? 受 序 列 652[A"(5)] 
和 662(А"(6)) 控制 . 
因此 , 如 果 满足 条 件 (С), 则 对 于 充分 小 的 5 (例如 , 6? < min(e, blo? + 1)/6)), 有 


JimP{66*(A™(6))» > b} = 0, 
从 而 , 由 83 定理 4 的 系 知 (39) 式 成 立 . 而 假如 满足 条 件 (C*), 则 对 于 同一 ô, 有 
limP{66°[A"(6)]n >b}=0. (41) 


仍然 由 §3 定理 4 的 系 知 , 由 于 |AIA"(6)jk| < (26)?, 故 由 (41) RE (39) R. 口 
6. 定理 3 的 证 明 ”考虑 林 德 伯 格 条 件 (L), 可 以 通过 直接 计算 验证 条 件 (C) 和 
(1), 以 及 条 件 (C*) 和 (3) 的 等 价 性 (练习 题 6). 
т. 定理 4 的 证 明 ”由 林 德 伯 格 条 件 (L), 可 见 条 件 (А) RE. 关于 条 件 (B), 只 
需 注意 到 , 在 en ШИЙ - 差 的 情形 下 , 典型 分 解 式 (9) 中 的 随机 变量 BF 可 以 表 为 
如 下 形式 : 


үм] 
В? =- / тар. 
i > Чери“ 


所 以 , 由 林 德 伯 格 条 件 (L), 可 见 Вр Р, 0. 


в. 平方 可 积 蒜 - 差 的 情形 ”这 一 节 的 基本 定理 一 - 定理 1, 是 在 被 加 项 之 和 
一 致 渐 近 小 的 条 件 下 证 明 的 . 自然 提出 的 问题 是 , 在 没有 一 致 浙 近 小 条 件 的 情况 下 ， 
中 心 极限 定理 成 立 的 条 件 如 何 ? 对 于 独立 随机 变量 的 情形 , 第 三 章 85 的 定理 1 就 是 
这 样 的 例子 (其 条 件 是 : MEER). 
我 们 现在 (不 加 证 明 地 ) 给 出 这 一 定理 的 类 似 , 但 是 局 限于 序列 E = (к, Я»), 
1 < к < п, 是 平方 可 积 款 - 差 的 情形 (EE < оо, Е (к k1) = 0). 
记 Fok(z) = Р4Еь < 29701} 是 ok 关于 Я, 的 正则 分 布 函数 . 设 Ank = 
Е(& F k-1)- 
定理 5 “如 果 对 于 平方 可 积 蒜 - ŽE = (6,6,9 0), 0<К<п, n>1, 满足 条 
件 : 
[nt] 
Ул 2.0, 0<o? <o, O<t<1, 
k=1 
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而 对 于 任意 = > 0, 


[nt] 


Efo ы 
kai” {lzl>e} 











Fak(2)- $ ( =) 


X? 4, м(о,о?). 


9. 练习 题 

1. Ж En =љ + п>1, Ж m э, МС, > 0. EH 6, 5 n. 

2. 设 (€(e)),n > 1,є > 0, 是 随机 变量 族 , 且 对 于 每 一 个 。> 0, 当 n 一 oo 时 ， 
Же, ® 0， 例 如 , 利用 第 二 章 810 练习 题 11 的 论断 证 明 , 存在 序列 en | 0, 使 
人 En(en) 7-0. 


3. 设 (aR), 1 < 上 < n,n 之 1, 是 复数 值 随机 变量 , (Pa.c.) 


> lagls C，lagl < an 10. 
к 


证 明 (Р-а.с.) 
lim TIa+ape- =1. 
k=1 


4. 证 明定 理 1 的 注 2 中 提出 的 命题 . 
5. 证 明 引 理 的 注 中 提出 的 命题 . 

6. 证 明定 理 3. 

7. 证 明定 理 5. 


89. 伊 芯 公 式 的 离散 版 本 


1. 引言 在 布朗 运动 、 以 及 与 之 同类 的 过 程 ( 误 、 局 部 蒜 、 下 蒜 .……… ) 的 随 
机 分 析 中 , 伊藤 清 (It6 Kiyosi) 变量 替换 公式 有 特别 的 作用 . 在 这 一 节 考 虑 该 公式 的 
离散 型 变 式 , 并 且说 明 如 何 经 极限 过 渡 , 可 以 得 到 布衣 运动 的 伊 脱 清 公 式 . 

2. 二 次 协 方差 的 积分 表示 X = (Х„)о<а<м ТУ = (Ү„)о<п<м 是 概率 空 
间 (F, P) 上 的 两 个 随机 变量 序列 , Н Xo = Yo = 0 而 





[Х,У] = ([X,Y]。)o<n<N， 


其 中 К 
[X,Yln = > AXkAI (1) 


k=1 
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是 序列 X 和 YY 的 二 次 协 方差 ( 见 81). 
假设 给 定 一 绝对 连续 函数 Р = F(z): 


Рт) = Е@)+ f fod, (2) 
0 
其 中 / = ЛУ È R 上 的 博 雷 尔 函数 , 对 于 任意 c > 0, 满足 条 件 
плоды < =. 
lylse 
下 面 提 到 的 变量 替换 公式 , 用 序列 X = (X)oen<n “Н” 泛 函 的 语言 , 给 出 
序列 
F(X) = (Е(Х,)оса<м. (3) 
表示 的 概念 
考虑 序列 X 和 J(X) = (ЛОХ осм 的 二 次 协 方差 XFO 其 中 = 
(х), тє В, 是 (2) 式 中 的 函数 . 根据 (1) R 
х,у) = Задхьахь = У(Х) = А1) - Xe). (4) 
К=1 k=1 


如 果 引 进 两 个 “离散 积分 ”( 对 照 81 定义 5) 


MX, AX) =F f(Xr-1)AXk, 1<n<N, (5) 
k=1 
和 п 
D(X (х) = С /(Х)АХ, 1<п<М, (6) 
k=1 


则 二 次 协 方差 可 以 表示 为 
[X, F(X)]n = АСА, F(X)) - In(X, /(Х)). (7) 


(У п=0 R}, Ж Io = № = 0). 

在 我 们 所 考虑 的 情形 下 ,对 于 固定 的 实数 N,， 引 进 新 的 〈“ 逆 向 ") 序列 Х = 
(Х„)о<п<м› 得 

Ea = XN (8) 
显然 ， 
In(X,f(X)) = —In(X,f(X)), 
且 类 似 地 _ Ж. 
1(Х, }(Х)) = -Un (X, ИХ) - In-n(X,f(X))}, 
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因此 , 由 (7) 式 可 得 
[X, /(Х)]х = ТО, РО) + In (X, ИХ), 
且 对 于 1 <. < N, 有 
1X, ХХ = ИХ, ИХ) — 1х-„(Х, /(Х))} — In(X, АХ) 
- { 5 f (Xk_1)AX + Уул, рах. (9) 


к=М-п+1 k=l 


Ж 有 益 地 注意 到 , 由 (т) RA (9) 式 给 出 的 二 次 协 方差 [X,J(X)l。 表达 式 的 
不 同 结构 . (7) 式 中 的 “积分 ” 


M(X, A(X) = У /(Хь-)АХу, 


k=1 





是 这 样 形成 的 : 在 区 间 [К — 1, К] (E WAR) 值 f(Xk-1), 在 此 整个 区 间 上 都 乘 
以 АХ» = Xk 一 Xk-1， 然 而 ,“ 积 分”.(X,f(X)) 的 组 成 却 不 同 : 是 增 量 AX = 
Xk Хр 乘 以 区 间 [к 一 1, 的 “ 右 ” 端 点 上 的 值 , ШИИ Xx- 

这 样 , 可 以 说 ,(7) 式 既 包含 “ 正 向 积分 mX, SX), 又 包含 “ 反 向 积分 R(X, 
ху. 然而 , 在 (9) RP (对 于 序列 Х 和 Х) 所 有 “积分 ” 都 是 “ 正 向 的 ”. 


3. 伊 车 公式 的 离散 版 本 “由 于 对 于 每 一 个 函数 9 = д), 有 
ИХьа) + ОХЬ) = Xr- = FIX) + Жи = 0, 
则 显然 
F(X) = СФ + Унь рах, + хх) 


+5 firo - (Хай - e tay}, по) 


k=1 
特别 , 如 果 (т) = f(z) ,其 中 了 = f(z) Ж (2) 式 中 的 函数 , 则 
F(Xn) = Е(Хо) + In(X, f(X)) + 1р, ЖКХ)» + Rn(X, КХ)), (11) 


其 中 
а 
RSD |" рео - EH] ae аз) 
к=1° Xr- 
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由 数学 分 析 中 熟知 的 性 质 , 如 果 函 数 ү" (т), 则 有 “梯形 公式 ”: 
b b n 
[оо ель f'e- ое -nr Sa 


оз г 
-EZY -Dt -oshar 


=> 3 1 
= C да+ 0-a) f ste- па = 2 È pre), 
0 
其 中 (ж), ЯП п 是 区 间 (a, 6) “中间” 的 点 . 
因此 , 由 (12) 式 , 有 
Р(Х, f(X)) = -5 ах, 
其 中 Xk_1 < me < Ху. 由 上 面 的 表达 式 , 易 见 
1Rn(X,J(CX))| < Z sups”) x Уа, (13) 


其 中 вир 对 于 满足 min(Xo, X1, ,Xn) < n < max(Xo,X1,… ,Xn) 的 一 切 7 值 来 
求 : 

我 们 把 (11) 式 称 做 伊藤 公式 的 离散 版 本 . 需要 强调 , 该 公式 的 右 侧 由 如 下 三 部 
分 构成 : “离散 积分 ”I,(X, Р(Х), 二 次 协 方差 |IX, Р(Х), 和 “ 余 ” 项 Rn(X,f(X)). 
R” 项 的 名 称 在 于 说 明 , 当 由 相应 的 极限 过 程 向 连续 情形 过 渡 时 , Ru(X,fJ(X)) 的 极 
限 为 0 ( 详 见 第 5 小 节 ). 

4. Я 

例 1 ШЖ f(z) =a+bz, 则 R(X, f(X)) = 0, 这 时 (11) 式 有 如 下 形式 : 


F(Xn)= Е(Хо) + Һ(Х, /(Х)) + 1х, ИХ)». (14) 
(对 照 下 面 的 (19) R). 
例 2 设 


f(z)=signz=40, т=0, 


而 F(z) = |z|. 

假设 Xi = 5, 其 中 Sk = & ++ &,К 1, Ма, 62,7: 是 独立 伯 努 利 随机 变 
量 序列 , 且 每 一 个 Elk > 1) 都 以 概率 1/2 分 别 取 +1 为 值 . 

如 果 设 So = 0, 则 直接 由 (11) ATURE 


15.1 = 》 (signSk_)ASk + Nns (15) 
k=1 
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ЖФ М, = #0 < k < n, Sk = 0} 是 序列 So, 51,… 中 “0” 的 个 数 . 
包含 在 (14) 式 中 的 “离散 积分 ” 


(не. ası) 
п>1 


k=1 


ER. 因此 , 由 (15) 式 可 见 


Е|$„| = EN,. (16) 
因为 (练习 题 2) 

"ыб. а= an 
所 以 由 (16) 式 可 见 

ЕМ, ~ т, п 一 оо. (18) 


换 名 话说, 在 随机 游 动 So, S1,… ,Sn 中 “平局 ”的 平均 次 数 按 量 级 Vn 增长 ,而 
不 是 像 最 初 感觉 的 那样 好 像 “ 按 量 级 ”增长 " 需要 指出 , 性 质 (18) 十 分 直接 地 与 反 
正弦 定律 ( 见 第 一 章 810) 相 联系 , 并 且 实 际 上 可 以 由 反正 弦 定律 得 到 . 

5. 布朗 运动 的 伊 芯 变 量 替 换 公式 ” 设 В = (Bi)o<tsl 是 标准 (Bo = 0,ЕВ, = 
0,ЕВ? = t) 布朗 运动 ( 见 第 二 章 813), 而 Xk = Ву. = 0,1,- n. 

运用 (11) 式 , 可 得 如 下 结果 


Е(В\у) = Е(Во) + У Л(Вк—ууә)АВьу„ 
к=1 


+ В л), Bpnln + (В (В л). (19) 


由 布朗 运动 的 理论 (例如 , 可 参见 [11], [17], [77]), 知 
Увы» — Bu-bm 20, п-0, (20) 
k=1 


从 而 , 如 果 函 数 / = (г) 有 二 阶 导 数 , 且 对 于 某 个 常数 C > 0, (х) < Сте В, Д] 
由 估计 (13) 式 , 可 见 Rn (В... (В.а) 2+0. 
仍然 由 布朗 运动 的 理论 知 , 对 于 任意 博 雷 尔 函 数 f = f(z) є 区 。( 即 对 于 任意 


常数 C > 0, 满足 
/ /?(ж)ат < оо 
||<сС 


的 函数 ), “离散 积分 * 
DB wn)ABe/n 
k=1 
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(在 依 概率 收敛 的 意义 上 显然 ) 存在 极限 , 记 作 及 f(B。)dB。, 并 且 称 做 布朗 运动 的 伊 
ЖЖМ. 
这 样 , 由 (19) 式 可 见 , 该 式 中 的 “ 余 ” Р, (В... ДВ.) +0, “离散 积分 ” 


DB -bm)ABkm 


к=! 
( 依 概率 ) 收敛 于 “随机 积分 ”用 f(B,)dB。, 从 而 二 次 协 方差 
[Bn, /(В.)] (= (В. /,), BAm]) 
依 概 率 收敛 的 极限 , 自然 应 当 记 为 
[B,f(B)]. 


这 样 , 如 果 函数 / = f(z) 由 二 阶 导 数 , 且 对 于 某 个 常数 C > 0,1f”(z)| < Сог є 
R, E f € Llo 则 有 如 下 公式 : 


Е 1 
гв) = FO) + | лав, + 31B, (ВУ. ер 
这 时 ， 
1 
ив, лв = | вда. (22) 
0 
тя, 1 1 
кв) = к@)+ | /(ВдаВ, +5 | 78а», (23) 
或 者 更 标准 的 形式 为 : 
ғ) = ғ0)+ | ‘p(B)dB, + 1 J | F'(B, )ds, (24) 
0 0 


正 是 这 一 公式 (对 于 Ре С?) 称 做 布朗 运动 的 伊藤 变量 替换 公式 . 
6. 练习 题 
1. 证 明 公式 (15). 
2. 证 明 渐 近 式 (17). 
3. 证 明 公式 (22). 
4. 试 证 明 对 于 任意 函数 F є С? (24) 式 成 立 . 


510. 保险 中 破产 概率 的 计算 . МЛ 


1. 破产 概率 ”这 一 节 将 要 介绍 的 内 容 可 以 很 好 地 演示 , 鞭 方 法 如 何 (例如 为 保 
险 公司 ) 提供 破产 概率 的 简单 估计 . 


$10. 保险 中 破产 概率 的 计算 . 蒜 方 法 > 201. 





HX = (Х.) оо 是 描绘 所 考察 保险 公司 资本 演变 的 随机 过 程 . 以 Xo = u > 0 k 
值 表示 公司 的 初始 资本 . 假设 保费 收入 由 公司 以 固定 的 速度 c > 0 ( 即 经 时 间 At 收 
入 为 cAt) 连续 地 积累 . 假设 偿付 保费 的 诉求 出 现在 随机 的 时 间 T,72,…(0 < Ti < 
Т» < …), 而 赔偿 的 相应 金额 表现 为 非 负 随机 变量 &1,&2,… 

由 以 上 的 说 明 可 见 , 在 时 间 t > 0 保险 公司 的 资本 为 


Х, =utct— 5, (1) 


其 中 
S = Y GIT: < t). (2) 


121 
я 
T=infft>0:X < 0} 
是 保险 公司 的 资本 首次 变 为 0 或 负 值 的 时 间 . 

如 果 对 于 一 切 t > 0, X > 0, 则 设 Т 等 于 +оо. 由 完全 明显 的 理由 , 自然 把 时 
Я 称 为 公司 的 “破产 时 间 ”. 我 们 在 下 面 的 主要 兴趣 是 , Ж (或 者 估计 ) 破产 的 概 
率 Р{Т < оо}, 或 对 于 任意 t > 0, 在 时 刻 t 前 破产 的 概率 P{T < Ц. 

2. 克拉 默 - 伦 德 伯 格 模型 ” 求 这 些 破产 概率 是 相当 不 容易 的 问题 . 不 过 , 对 于 
克拉 黑 - 伦 德 伯 格 (Н. Сгатёг ~ С. А. Lundeberg) 模型 , 该 问题 有 (部 分 ) 解 . 而 所 
谓 克拉 默 - 伦 德 伯 格 模型 的 特点 是 , 它 满足 如 下 条 件 . 

А. 假设 时 间 о; = Т, 一 了 -1,i > (Ту = 0), 是 独立 随机 变量 , 并 且 服从 指数 分 
Яр: P{o; >t} = Ает, > 0,i > 1. ( 见 第 二 章 83 表 3). 

В. 随机 变量 &1,&2,… 是 独立 同 分 布 , 其 分 布 函数 F(z) = PAE < г) 满足 条 件 : 
Е(0) = 0， = 

u =/ zdF(z) < оо. 


С. 序列 (Ti, Ta) 和 (&1,62,…) 是 独立 序列 ( 按 第 二 章 85 定义 6 的 含义 ). 
设 
м= Ут <t), #>0, (8) 
#21 
是 描绘 + 时 前 (包括 时 刻 t), 偿付 保费 诉求 数量 的 过 程 , 且 No = 0. 
因为 对 于 大 > 1， 


{Tk > t} = {ot+.…+ok >t} = {М < k}, 


所 以 注意 到 条 件 A, 且 根据 第 二 章 88 练习 题 6, 有 


大 一 1 
P{N <k}=P{ot+.+or >t}= De 


a 
x й 
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从 而 
PIN = k} = e= CDE k=0,1,.… (4) 


这 样 , 随机 变量 №, 有 泊 松 分 布 (参见 第 二 章 83 42), 参数 为 At, 恰好 等 于 数学 
ЗН Ем. 

Ж (3) 式 构造 的 过 程 N = (Ne)t>o, 特别 更 新 过 程 的 情况 (第 二 章 89 第 4 小 节 )， 
称 做 泊 松 过 程 . 该 过 程 的 轨道 是 间断 的 (确切 地 说 , 是 阶梯 函数 , 右 连续 且 跃 度 皆 等 
于 1). 与 轨道 是 连续 函数 的 布朗 运动 (第 二 章 813) 一 样 , 泊 松 过 程 在 随机 过 程 论 中 
重要 作用 . 具体 地 说 , 利用 这 两 个 过 程 , 可 以 建立 具有 相当 复杂 概率 结构 的 随机 过 
程 .( 独 立 增 量 过 程 就 是 这 种 情形 的 典型 例子 : 例如 . A [13], [11], [76]). 

з. 克拉 默 - 伦 德 伯 格 模型 下 的 破产 概率 ”由 条 件 C 可 见 ， 


E(X: — Хо) = ct — Е, =а-ву ит <t) =c- LESIN <t) 
= ct - DREEIT < t) = ct – KEPI <t} 


= ct -nD P{N; > i} = ct — ШЕМ, = (с – №). 


由 此 清楚 地 看 到 , 公司 经 营 赢利 (ШШ EX: — Хо) > 0) 的 条 件 , 表现 为 
с> №. (5) 
在 下 面 的 分 析 中 , 起 重要 作用 的 下 面 的 函数 
мә = [ее – дака), z>0, (6) 
其 中 Mz) = Ё(-2) – 1, м 
Ё(в) = J е-*таЕ (2) 
是 拉 普 拉 斯 - 斯 蒂 尔 切 斯 (P. S. Laplace - T. J. Stieltjes) 变换 (s 是 复数 ). 
设 
9(2) = А№(2) – cz, £o = 0, 
则 对 于 任何 使 h(r) < оо 的 > > 0, 有 
Ха 


со м 
Ее-ГХ‹-Хо) = Be) ете №5" шег“ У Ee 名 SP{N = п} 


n=0 


е" 2 + h(r yp Вер остео) -etDh(r)-cerl = ets), 
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对 于 з < +, 类 似 地 可 以 得 到 


Бе-"(Х:-Х.) -ett-sg(n). (7) 


HFI = о(Х„,в <t) 由 于 过 程 = (ХО 是 独立 增 量 过 程 (练习 题 2), 则 
(Р-а.с.) 
E(e -XAF Ху = Ее-"(Х‹-Х.) = elt-—s)g(n), 


从 而 
Е(е-"-96) 7 Х) = е-"Х.-$9(%), (8) 
я 
2 =е“"Х--59®, +20. (9) 
由 (8) 式 可 见 , 显然 
E(ZF*)=2Z,, < (10) 


与 $1 定义 1 类 似 , 自然 称 过 程 2 = (Zilizo (关于 о- КЖ “Г (Я), о) 是 
ж. 注意 , 对 于 所 考虑 的 情形 , Е|7,| < оо, > 0 (对 照 81 的 性 质 1). 与 81 定义 3 类 
似 , 值 域 为 [0,+o0] 的 随机 变量 r = r(w) 是 马尔 可 夫 时 间 , 或 (关于 o- 代数 “ 流 ” 
(# у) 不 依赖 于 将 来 的 随机 变量 , 假如 对 于 每 一 个 + > 0, 有 


{r(w) <t} EX 


对 于 现在 考虑 的 连续 时 间 的 情形 , 82 的 定理 1 (在 明显 地 改变 记号 的 情形 下 ) 仍 
然 成 立 . 特别 , 对 于 马尔 可 夫 时 间 r, 有 


EZinr = EZo. (11) 
#Т=т. ЖА, 由 (9) RA (11) R, 可 见 对 于 任意 上 > 0, 有 


е-"“ = Ee "Xr-(tAT)g(r) > Eje Xnr -DIOT < t)P{T < t} 
= Е[е-"Х=-Т#®үт < рТ < t} > Ее 79 Г < t)P{T < t} 


> gig, "OPT < 由 


从 而 


P{T<t}< ЛТ“ шах ess("). (12) 


е-тч 

САНЕ с 

ш, es9(") <<: 
s: 


我 们 现在 更 进一步 考虑 函数 


g(r) = АМт) — ст. 
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显然 , g(0) = 0, (由 于 (5) R) g'(0) = Ap — c < 0, H g”(r) = А (т) > 0. 因此 存在 唯 
一 正 值 >= R, 使 g(R) = 0. 
注意 , 对 于 r+ > 0， 


f ~ Ih — Разг = / Е / errdF(y)dz = f s, ( J И ез) dF(y) 


Р 
=} f (еэ — AFl) = ЕМ). 





由 此 且 由 等 式 XA(R) - cR = 0 可 见 ，R 的 值 是 方程 
а е — Е(2)] 42 =1 (13) 


( 且 在 这 种 情况 下 是 唯一 ) 的 根 . 
现在 , MRE (12) RPR г = R, 则 对 于 每 一 个 ! > 0, 有 


P{T <t} <е *", (14) 


从 而 
P{T <оо}<е К", (15) 


于 是 , 证 明了 下 面 的 定理 . 

定理 ”假设 对 于 克拉 默 - 伦 德 伯 格 模型 , 满足 如 下 条 件 А,В,С 和 AL < с. 

ЖА, 破产 概率 P{T <t} 和 P{T < оо} 满足 不 等 式 (14) 和 (15), 其 中 RAS 
程 (13) 的 (唯一 ) 正 根 . 

а. 连续 时 间 的 情形 ”在 上 面 进行 的 证 明 中 用 到 (11) 式 , 如 曾经 指出 的 那样 , 对 
于 连续 情形 , (11) 式 的 正确 性 , 可 以 由 82 定理 1 相应 的 类 似 得 到 (82 定理 1, 是 关于 
在 把 时 间 换 为 随机 马尔 可 夫 时 间 时 默 性 的 不 变性 ).( 这 一 结果 的 证 明 , 例如 , 参见 专 
Ж [41] № 33-2). 不 过 , 假如 将 (条 件 A 中 的 ) 变量 ci,i = 1,2,…,“ 服 从 指数 分 布 ”， 
换 成 “服从 (离散 型 ) 几何 分 布 : P{o; = К} = ре > г, 那么 只 需 引 用 82 中 证 
明 的 定理 1. 

以 上 引进 的 要 求 借鉴 连续 时 间 随 机 过 程 理 论 的 结果 , 是 有 益 的 至 少 在 于 , 在 应 
用 中 出 现 的 模型 , 并 不 是 在 离散 时 间 而 是 在 连续 时 间 起 作用 的 模型 . 

5. 练习 题 

1. 证 明 过 程 N = (№) ьо (在 条 件 A F) 是 独立 增 量 过 程 . 

2. 证 明 过 程 X = (Xi):>o 也 是 独立 增 量 过 程 . 

з. 考虑 克拉 默 - 伦 德 伯 格 模型 , 并 且 假设 变量 o0;,i = 1,2,…, 独立 , 并 且 “ 服 从 
几何 分 布 : P{oi = k} =, > 1". 试 表述 本 节 的 定理 . 


51. 随机 金融 数学 的 基本 定理 . 无 仲裁 的 蒜 特 征 205. 





811. 随机 金融 数学 的 基本 定理 . 无 仲裁 的 著 特 征 


1. 引言 上 一 节 介绍 了 蒜 论 用 于 证 明 保险 理论 的 基本 定理 之 一 一 一 伦 德 伯 
格 - 克拉 默 定理 . 这 一 节 再 考虑 蒜 论 的 一 种 应 用 拷 论 用 于 在 不 确定 条 件 下 运 
行 的 “无 仲裁 金融 市 场 ”问题 . 下 面 引进 的 定理 1 和 定理 2, 在 随机 金融 数学 中 习惯 
上 称 为 制裁 理论 的 “基本 定理 ”. 这 两 个 定理 的 重要 性 在 于 , 其 用 鞭 的 术语 给 出 了 保 
障 所 考察 的 金融 市 场 无 仲裁 性 的 条 件 (其 含义 将 在 下 面 说 明 ), 以 及 保障 达到 确定 的 
金融 目标 的 条 件 . (关于 金融 数学 , 详 见 [100]). 

2. 金融 数学 的 某 些 概念 ”这 里 , 将 要 给 出 几 个 必要 的 定义 . 

对 于 讨论 的 所 有 问题 , 都 假设 给 定 某 个 固定 的 概率 空间 (0,27, (Я „)„>о,Р), Ё 
在 价格 、 金 融 指数 以 及 金融 市 场 的 其 他 指标 的 演变 中 , 是 描绘 随机 不 确定 性 的 基础 . 
这 里 , 我 们 把 ,中 的 全 体 事件 视 为 在 时 间 n (包括 п) 得 到 的 “信息 ”. И, Fn 
可 能 包含 关于 一 定金 融 证 卷 的 价格 、 金 融 指 数 等 数值 的 “信息 ”. 

与 “基本 定理 ”有 关 的 , 基本 对 象 是 (B, S)- 市 场 的 概念 , 其 定义 如 下 . 

设 B=(Bn)w>o FI S = (Sn)n>o 是 正 值 随机 变量 序列 , 其 中 假设 对 于 每 个 n> 0, 
随机 变量 В, 是 F ni- Я (Я, = Яо), 而 变量 5, 是 2 „— 可 测 的 . 为 简便 
计 , 在 下 面 的 讨论 中 , 假设 c- 代数 Fo 是 平凡 的 , ЕЯ о = (2,0) ( 见 第 二 章 82). 这 
FÉ, BoF So 都 是 常数 . TÆ, 按 81 的 术语 , 两 个 序列 В = (Bn)n>o 和 S = (Sn)n>o 
都 是 随机 子 序列 , 并 且 序列 В = (Bn)n>o 同时 又 是 可 预测 的 (因为 B 是 F n-i- 
可 测 的 ). 

按 其 金融 意义 , 序列 В = (Bn)n>o 是 描绘 银行 账户 (“bank account”, “тепеу 
account”) “单位” 演变 的 序列 . 这 时 , 随机 变量 B 是 F n-i- 可 测 性 表示 , 在 时 间 п 
(例如 , SR) 银行 账户 的 值 , 在 时 间 п — 1 (例如 , ER) 已 经 是 完全 已 知 的 . 

如 果 对 于 n>1, 记 ру 


т = ` 

Bn-1 
ЖИР ДВ, = В, - Bn-1, 则 显然 В, 可 以 表示 为 
Ba = (1+т.)В1, п>1, (2) 


其 中 随机 变量 r, EF ni 可 测 的 , ЗЕН rn > —1 (因为 根据 条 件 B。 > 0). 在 金融 
学 文献 中 , 量 т 称 做 (银行 ) 利率 . 

序列 5 = (Sn)n>o 与 序列 В = (Bn)n>o 的 差别 在 于 , 5, 是 Fn- 可 测 的 , 而 
Bn 是 Я, 可 测 的 . 实际 情况 正 是 这 样 , 例如 , 股票 (“stock”，“stocks”) 价格 : 对 
于 股票 在 时 间 п 的 真实 价格 , 只 有 在 其 报价 时 ( 即 “ 今 天 ”, 像 银行 账户 那样 而 不 是 
“昨天 ”). 

类 似 于 (银行 ) 利率 , 对 于 股票 = (5„)„>о, 可 以 引进 所 谓 “市场 ”利率 : 


гь = 25, п 21. (3) 
"-1 





(0 
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由 此 明显 可 见 , 对 于 一 切 pn > -1, 有 


Sn = (1+ pn)Sn-1, (4) 
因为 (根据 假设 ) 所 有 5, > 0. 
由 (2) 式 和 (4) 式 , 可 见 
Bn = Bo [а +), (5) 
k=1 
Sn = So [а + юк). (в) 


k=1 


在 金融 学 文献 中 , 通常 称 这 些 公 式 按 单 利 的 类 型 形成 . 在 许多 问题 中 , 按 复 利 
в, {У 5% (УА), (7) 
k=1 k=1 


的 类 型 形成 的 概念 也 很 重要 , 其 中 


Fa = In(1 + rk) = Ш ( + 2") А (8) 
-1 


э, А5, 
Ên = (1+ рк) = In (1+ 22%). (9) 
习惯 上 把 这 些 变 量 称 为 “对 数 利润 ",“ 归 还 "，“ 偿 还 ”. 
上 面 用 描述 方法 引进 的 两 过 程 В = (Bu)s>o 和 S = (Sn)n>o, 按 定义 构成 
(В,5)- 金融 市 场 , 由 银行 账户 B 和 股票 S 两 种 资产 组 成 
ж 显然 , 因为 现实 金融 市 场 通常 包含 大 量 不 同性 质 的 资产 (例如 , 见 [100]), 这 
样 的 (в, 5)- 市 场 仅仅 是 现实 金融 市 场 最 简单 的 模型 ， 然 而 , 就 是 在 这 种 简单 的 情 
形 下 , 在 研究 许多 纯 金 融 - 经 济 来 源 的 问题 时 , 已 经 可 以 仔细 研究 并 且 作为 例子 说 
В], ВЕНЕ. (例如 , 关于 在 (В, 5)- 市 场 上 无 仲裁 可 能 性 的 问题 , 就 属于 
这 种 情形 . 而 关于 这 一 问题, 将 在 下 面 引进 的 “第 一 基本 定理 ” 中 给 出 答案 ). 
з. 有 价 证 卷 总 存 和 自 筹资 金 总 存 现在 给 出 有 价 证 券 的 总 存量 及 其 资本 的 定 
义 ,以 及 引进 自 筹资 金 总 存量 的 重要 概念 . 
НОЯ, (F „), ло. Р) 是 所 考察 的 过 滤 概率 空间 , 其 中 Fo = (2,0); 而 = 
(8,7) 是 可 预测 序列 偶 : В = (Bn)nzo 和 7 = (Yn)n>o- 
除 变量 On 和 Ynn > 0 的 可 预测 性 , 即 B。 和 л, 为 Ini 可 测 的 条 件 之 外 ， 
| 其 中 (Fi =F o), 对 于 Ba Я (п > 0) 的 可 能 值 不 再 加 任何 限制 . 特别 , 这 些 变 
量 可 以 取 分 数 和 负数 为 值 . 
随机 变量 6。 和 六 的 含义 相应 为 , 在 时 间 п 银行 账户 的 “个 数 ” 和 股票 的 “ 张 
| ж. 
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我 们 称 在 所 考察 的 (B, S)- 市 场 上 ， = (8, у) 是 有 价 证 券 的 总 存量 . 
与 每 一 总 存量 = (8,7), 有 与 其 相应 的 资本 X = (Ха) ло 相 联系 , 其 中 


Xa = „Ва 二 加 Sn (10) 


把 BB 解释 为 银行 账户 上 的 货币 资金 , 而 Y.S" 是 时 间 п 股票 的 价值 . 序列 6 和 7 
的 可 预测 性 也 是 清楚 的 :“ 明 天 ”有 价 证 卷 的 总 存量 , 应 该 在 “今天 ”编制 . 

特别 , 下 一 个 重要 的 概念 一 -“ 自 筹资 金 ” 总 量 的 概念 , 反映 分 析 这 样 (B, 9) 一 
市 场 : 在 这 样 的 市 场 上 “无 论 资金 流出 , 还 是 自 外 部 流入 ”都 不 存在 . 从 形式 的 观点 
看 , 相应 的 定义 是 由 下 面 的 方式 给 出 的 . 

由 “离散 微分 公式 ”A(anbn) = anAbn + bn-1Aan， 可 见 资金 的 增 量 AXT 
(= Xz 一 Xr_1) 可 以 表示 为 


АХ = (ҺАВ„ + АЗ] + [Bn-1 Abn + 5.-1А7]. (11) 


资金 的 实际 的 变化 只 与 银行 账户 和 股票 价格 值 的 “市 场 ”变化 有 关 ， 即 与 量 
В.АВ, + YnASn 的 变化 有 关 . (11) 式 右 侧 的 第 二 项 , 即 Bu-1Ap + 5,14% 是 
Fai 可 测 变量 , 并 且 在 时 间 п 变量 Xx_, 任何 增加 或 减少 都 不 可 能 . 于 是 它 应 该 
等 于 0. 

原则 上 , 资本 的 可 能 发 生变 化 , 不 仅 因为 利率 (rn 和 pnn > 1) 的 “市 场 ” 变化 ， 
例如 还 可 能 因为 资本 从 外 部 流入 , 由 于 业务 费用 的 支出 , 等 等 . 

以 后 , 这 些 可 能 性 都 不 考虑 , 假设 全 部 考察 的 总 存 п = (8, у) 满足 条 件 : 对 于 一 
Üni, 

AXZ = В.АВ, + mASn- a2) 


在 随机 金融 数学 中 , 通常 把 这 样 的 总 存 称 为 自 筹 的 (self-financing). . 
4. 随机 金融 数学 的 第 一 基本 定理 ”由 (12) 式 可 见 , 对 于 自 筹 总 存量 = (8,7), 


Х = XE + У \(%АВк + ль А), (13) 
К=1 
且 由 于 а " 
(8) (8), w 
则 
хх, Sk 
тету "Ума (в). (15) 


固定 某 个 N > 1, 并 考察 (B, 5)- 市 场 在 时 间 n= 0,1,… ,NN 的 变化 . 

定义 1 称 在 时 间 N 的 自 筹资 金 总 存量 (或 自 筹资 金 策略 ) т = (8, ү), 实施 促 
Ж, 或 实施 仲裁 的 可 能 性 , ШЖ ХЕ = 0, XN > 0 (Р - ac), 且 以 大 于 0 W P- 概率 ， 
Ж X7 > 0, B P{X} > 0} >0. 
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定义 2” 称 (在 时 间 №) 在 (В,5)— 市 场 上 无 仲裁 或 无 仲裁 可 能 性 , 如 果 对 于 
Ха =0 和 P{X% > 0} = 1 的 任何 总 存量 = (6,1), 实际 上 P{X% = 0} =1, 即 仅 
以 等 于 0 的 P - 概率 可 能 使 X% > 0. 

直观 上 , 在 无 仲裁 市 场 上 不 可 能 出 现 如 下 情况 : 对 于 某 一 总 存量 存在 得 到 无 风 
险 收入 的 可 能 性 . 

显然 , 关于 某 一 (B,5) 市 场 是 否 无 仲裁 , 因而 在 一 定 意义 上 是 “正确 的 "、“ 合 
理 的 ” 解 的 问题 , 与 序列 В = (В»)про 和 S = (5„)„>о 的 概率 - 统计 性 质 有 关 , 从 
而 与 包含 在 过 滤 概 率 空间 (О, (F n)an P) 上 结构 中 的 假设 条 件 有 关 . 

值得 注意 的 是 , 拷 论 可 以 相当 有 效 地 描绘 保障 无 仲裁 可 能 性 的 条 件 . 可 以 得 到 
的 甚至 更 多 . 具体 地 说 , 有 下 面 的 定理 . 

定理 1 (“第 一 基本 定理 ”) ”假设 过 滤 概 率 空间 (0, 多 ,( 多 )n<N, 卫 ) 描绘 随机 
不 确定 性 , ХФ #о=(о,О),# у =.Ў. 

AERLE (9,9, (Я „)„<м,Р) 上 的 (В,5)— 市场 是 无 仲裁 的 , 必要 且 充 分 条 
件 是 , 在 (0,77) 上 存在 与 测度 Р 等 价 的 这 样 一 个 测度 PP ~ P), 使 贴现 序列 


8б 
B NB] уе 


Sn 


Bn 


关于 测度 已 ЖЖ: 


E <œ, п<М, 








且 


Я ( 5 _ Shi 
下 (对 lz) = у=. п< №, 


At Ё 表示 关于 测度 互 的 数学 期 望 . 
注 1 对 于 向 量 过 程 5 = (S!,… ,54),d < оо, 定理 的 结论 仍然 成 立 ( 见 [100] 
中 第 у 章 $2b). 
#2 ”根据 完全 明显 的 原因 , 定理 中 的 测度 Р ARARA Ж. 
我 们 以 
м)={В=р:р #Ё- в} 
表示 测度 Р 的 全 体 : 测度 Р 与 测度 Р 等 价 且 序列 


关于 测度 Р ER. 


以 记号 NA 表示 无 仲裁 (No Arbitrage). 
那么 , 定理 1 的 结论 可 以 表示 为 : 


МА © M(P) # Ø. (16) 
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证 明 充分 性 设 五 是 M(P) "ВЕ, т = (8,7) 是 总 存量 , А Ху = 
BoBo + то5о = 0. 由 (15) 式 可 见 ,对 于 1 和 < ns 和 N ,有 


я -na (2). (17) 


$ [Sa 
(в). 
关于 测度 Р ER. 因此 , 序列 С = (Gz)o<n<w(G3 = 0), 和 
3% Sk 
в: ма (в). 1<n<N, 
ERER. 因此 序列 (X7/Bn)osnsn 也 是 鞭 变 换 . 


在 仲裁 测试 或 无 仲裁 的 情况 下 , 不 仅 需要 考虑 Х = 0 的 总 存量 т 的 情形 , 而 
且 需 要 考虑 Х > 0 (P-a.c.) 的 总 存量 т 的 情形 . ШЕ P ~P, Н By >0(P- 和 


Р-а.с.), 可 得 
Рођа. 


那么 , и 的 定理 3 TREH (ХУВ, осам 可 见 , 该 序列 实际 上 关于 测度 
P дй. 从 而 


序列 


PXA БХ - 
Ву Be À 
而 由 于 更 Р 
Бо} 1 af А - }-: 
Bn 


由 此 可 见 , хх = 0 (Р - 和 P-a.c.). 从 而 对 于 任意 自 筹 总 存量 л, 其 中 Ху = 
0, Xi 之 0 (P-a.c.), 实际 上 XẸ = 0 (P-a. с.). 于 是 , 根据 定义 2 无 仲裁 可 能 性 . 

必要 性 ”我 们 之 准备 仅 对 于 一 阶段 模型 (B, 5) – 市 场 进行 证 明 , 即 只 证 明 М = 1 
的 情形 . 即便 通过 这 个 简单 的 例子 , 就 已 经 清楚 地 看 出 证 明 的 好 思路 : 利用 无 仲裁 ， 
明显 地 建立 无 论 是 什么 样 的 鞭 测 度 . 我 们 将 基于 (下 面 将 引进 的 ) RA (Esher) 变换 ， 
建立 这 样 的 测度 .( 关 于 的 一 般 情形 (N > 1) 的 证 明 , [100] 中 第 V 章 $25). 

不 失 普遍 性 可 认为 Bo = В, = 1. 这 里 , 由 无 仲裁 可 能 性 的 假设 可 见 (练习 题 1) 


Р{А5, >0}>0 和 P{AS; <0}>0. (18) 
(我 们 排除 了 平凡 的 情形 P{AS1 = 0} = 1). 
由 此 需要 证 明 ， 存在 满足 如 下 条 件 的 等 价 挝 测度 Р ~ Р, В EJAS] < 


оо, |А = 0. 
这 由 下 面 的 引 理 即 可 得 到 . 不 过 该 引 理 尚 有 一 般 概率 的 应 用 
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引 理 1 Я (0,7) = (R,. 罗 (R)), 而 X = Xw) 是 由 坐标 给 定 的 随机 变量 
(X(w) = ш); Р Я (9,9) 上 的 概率 测度 : 


P{X >0}>0, № P{X<0}>0. (19) 
ЖА, Е (0,77) 上 存在 概率 测度 Р-Р, 使 对 于 任意 实数 a, 有 
Ёе“Х < оо. (20) 


特别 , Ё|Х| < oo, #8. 
ЕХ =0. (21) 
证 明 引进 测度 Q = 9 (92), 而 Qtdz) = ce-”P(dz), 其 中 c= (Ее)! 规 
范 化 常数 . 


对 于 任意 实数 a, 设 
(а) = Есе". (22) 
其 中 во 表示 对 于 测度 Q 的 数学 期 望 
设 
2.02) = © (23) 
由 于 Zs(z) > 0, Н ва2.(Х) = 1, 则 对 于 任意 实数 a, 测度 Pa: 
Boldz) = Za(z)Qoldz) (24) 


是 概率 测度 . 显然 Р, Q ~P. 

Жз 变换 z ~ 一 erX/y(a) ЖОК ЈА. 在 下 面 将 要 看 到 , 对 于 a 的 某 个 
特殊 值 a,, МЕР = Pa, 具有 (8) #Е (21). 正 是 这 个 测度 通常 称 为 埃 合 测度 (或 
ЖФ Ж). 

由 于 (а) > 0, 可 见 对 于 一 切实 数 a 定义 的 函数 p = pla) 是 严格 四 ( 即 向 下 
m) 的 . 

设 у. = inf{yp(a) :a є В}. 有 两 种 可 能 的 情形 : 1) 存在 a,, AË plas) = p; 2) 这 
样 的 有 限 a, 不 存在 . 

对 于 第 一 种 情形 , o'la.) = 0. 因此 
Хе"-Х _ yp'(a.) 


Е.Х = Ба шу = ча.) 





且 可 以 取 测 度 Pa 做 所 要 求 的 测度 Р. 

到 现在 为 止 , 我 们 还 没有 用 到 条 件 “ 无 仲裁 性 ”(19). 不 难看 到 (练习 题 2), “无 
仲裁 性 " 条 件 排除 可 能 性 2). 这 样 只 剩 下 可 能 性 1), 而 这 种 情形 已 经 讨论 过 . 

FE, 当 М = 1 时 (存在 鞭 测度 的 )“ 必 要 性 ”得 证 . 关于 的 一 般 情形 N > 1， е 
们 已 经 给 读者 指出 , 可 以 借鉴 [100| 中 第 У 章 52а 的 内 容 . 
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5. Я 下 面 举 一 些 无 仲裁 (B, S)- 市 场 的 例 . 

例 1 假设 (B,5)- 市 场 由 (5) АМ (6) 式 描绘 , 其 中 1< kk < м, 且 对 于 一 切 
1<Е< М, ть =r (常数 ); 而 p= (pi,p2,… ,pw), 是 独立 同 分 布 、 只 有 a 和 bla < b) 
两 个 可 能 什 的 ( 伯 努 利 ) 随机 变量 序列 : Pfp = а} =g Р{ =b} =р,р+=1,0< 
р<1. 设 , 这 时 

` -~l<a<r<b. (25) 


这 样 描绘 的 (В, 5) 市 场 称 做 CRR - 模型, 其 中 是 模型 的 作者 姓氏 的 字 头 : Ж 
克 斯 (J. С. Сох), 罗斯 (R. A. Ross), 鲁 宾 斯 坦 (M. Rubinstein), (Л, [100]). 








由 于 在 该 模型 中 
Sn _ [1+ рһ\ Sn-1 
好 = (н) вы, 
ДШИ Р 应 当 满 足 
de ү 
l+r £ 





即 应 当 满足 Вр, =r. 
MRE р = Ё{о„ = b}, q = Р{рь = а}, 则 对 于 任意 n>1, 有 


由 此 , 得 





а. (26) 


在 上 面 的 情形 下 , 全 部 “随机 性 ”决定 于 伯 努 利 序列 р = (оп, p2,… орм). 假设 
Я = (а,Ь), 即 基本 事件 空间 由 序列 (z1,… ,zw) 构成 , 其 中 zi = а 或 b. (关于 空 
间 О 构造 的 这 一 特别 的 ,( 确 切 一 点 说 ) “坐标 的 ”构造 的 假设 , 并 不 失 研 究 的 普遍 性 ; 
关于 这 一 点 , 亦 见 第 6 小 节 定理 2 中 充分 性 证 明 的 末尾 ). 

作为 练习 (练习 题 3), 需要 证 明 , 由 


P(r ,ZN) = рб an) М-ы, тм), (27) 


定义 的 测度 Plr ,zw) ERAR, 并 且 是 唯一 的 , 其 中 


м 
(Ti ,TN) = Уа) 
izi 
ЖР Ь 的 zi 的 个 数 . 
由 (27) 式 明显 可 见 P{pn = а} = @,Р{р„ = b} = р. 
这 样 , 由 定理 1 可 见 , CRR - 模型 是 无 仲裁 (B,5) 一 市 场 的 例 . 
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例 2 假设 (B,S)- 市 场 有 如 下 构造 : 对 于 一 切 n=0,1,…,N, 有 Bn=1, 而 


sizs 5а). 1<п< М. (28) 
kl 
Ж р = pr toker 为 Fn_1- 可 测 ,其 中 jw > 0,ok > 0, 而 (e1,…en) 是 独立 平 
稳 高 斯 随机 变量 序列 , sk ~ №(0,1). 
我 们 现在 利用 埃 会 条 件 变换 , 在 (UF n) 上 建立 所 要 求 的 默 测度 Р. 具体 地 说 ， 
设 互 (dw) = Zn(w)P(dw), 其 中 
ва. 
7м(ш) = Д М zx(w) = Беер: (29) 
现在 , 应 当 这 样 选择 F ni 可 测 随机 变量 ok = ak(w) ,使 得 序列 (Sn)o<nsN 关于 
测度 Р ER, 其 中 Fo = (2,9). 
由 于 表现 (28), 关于 测度 B 的 鞭 性 等 价 于 : 对 于 一 切 1 < n < М, (关于 原 测度 
р) 有 
Еее" КР» F _ |] = Еее F 3-1]. (30) 


由 于 所 = Hin + опел, 故 由 (30) 式 可 见 , 应 这 样 选 择 变量 an, 使 
An 十 2 = -аһо?, 


Bp 


对 于 这 样 选择 变量 on(1 < < М), 密度 Zw(w) 由 下 面 的 公式 表示 : 


N 2 
2 64-5. (в +3) +3 (+3). (31) 
如 果 一 开始 对 于 < n < М, 设 jm = -02/2, ДР = Р. 换 句 话说 , 原来 的 测度 P 
本 身 就 是 蒜 . 

FE, 对 于 所 分 析 的 (B,S) - 市 场 (B = (В„)о<а<м) 有 : B = 1, 10 S = 
(5һ)о<п<м 同 例 1 一 样 是 无 仲裁 的 , 其 中 5„ 由 (28) 式 表示 . 作为 习题 (练习 题 4), 
要 求 分 析 如 下 问题 : 上 面 建立 的 蒜 测 度 Р 是 否 唯一 

ө. 随机 人 金融 数学 的 第 二 基本 定理 “下面 将 要 引进 的 (B, 5) - 市 场 完全 性 的 概 
念 , 对 于 随机 金融 数学 十 分 重要 , 因为 (无 论 所 考察 的 市 场 是 无 仲裁 的 , 还 是 有 仲裁 
的 ) 它 与 如 下 很 自然 的 问题 有 关 : 假如 对 于 给 定 的 Fw 一 可 测 “ 自 筹资 金 委 托 ”jn， 
存在 自 筹资 金 总 存量 т, 使 其 资本 Хх 准确 地 再 现 (或 者 至 少 不 小 于 ) fv. 
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定义 3 称 (B,S)- 市 场 (关于 时 间 N) 为 完全 的 , R N- 完全 的 , 如 果 任 意 
ARF n- 可 测 “ 自 筹资 金 委托 ”fy 是 可 以 再 现 的 , 即 存在 自 筹资 金 总 存量 т, 使 
Хр = Хм (Р-а.с.). 

定理 2 (第 二 基本 定理 ) ” 同 定理 1 一 样 , ИЯ (OF, (Я nocis P) 是 过 滤 
概率 空间 , Fo = (2,9), Fn =F; # (9,9, (F „)„<м,Р) 上 给 定 的 (B, S)- 市 场 
是 无 仲 载 的 (M(P) # 2). 

为 使 此 市 场 是 完全 的 , 必要 和 充分 条 件 是 存在 唯一 鞭 测 度 (|M(P)| = 1). 

证 明 必要 性 假设 所 考虑 的 市 场 是 完全 的 , 即 对 于 任意 F n- 可 测 有 界 “ 自 
筹资 金 委托 ”jw, 存在 这 样 的 自 筹资 金 总 存量 = (8,7), 使 Xi = fy (Р-ас.). 不 
失 普 遍 性 可 以 认为 В, = 1,0 < n < М. 因而 , (13) ATA 


N 
Ју = Ху = Ху + лкА5у. (32) 
k=} 
由 于 所 作 的 无 仲裁 性 假设 , ВНШ АО MP) 3 с. 现在 证 明 , 由 于 完全 性 假 
设 , 可 见 蒜 测度 的 唯一 性 (IM(P)| = 1). 
设 P! 和 Р? ЖА, 则 关于 其 中 任何 一 个 测度 , 序列 


(5) 


igngN 


ERER. 
对 于 某 个 集合 дем, В fw(w) = Ta(w). 由 于 (P-a.c.) HFEA т, 有 


N 
Ial) = XN = XE +Y WAS, 


k=1 
则 由 $1 定理 3 可 见 , 序列 
(аа) 
k=l 
是 关于 每 一 个 测度 Р! 和 P? . 从 而 


1<n<N 


EpiIA(w) = 五 i=1,2, (33) 


其 中 Ep 表示 对 测度 P' 的 数学 期 望 , 而 因为 Fo = (2,0), т = Х 是 常数 . 

由 (33) RTA, 对 于 任意 集合 Ae FN, 有 P1(4) = P2(4). 从 而 , 拷 测 度 的 唯 
一 性 得 证 . 

充分 性 ”充分 性 的 证 明 比 较 复杂 , 我 们 将 分 为 几 阶段 进行 . 

1) 考虑 无 仲裁 (B, S)- № (МОР) 3 2), 同时 假设 蒜 测 度 具 有 唯一 性 (IM(P)| 
= 1). 
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注意 , 关于 默 测度 唯一 的 假设 , 以 及 关于 著 测 度 完全 性 的 假设 , 都 是 很 强 的 限制 . 
此 外 , 结果 表明 , 由 这 些 假设 自然 地 可 见 , 轨道 = (5„)о<п<м 具有 “条 件 两 点 ”的 
构造 . 关于 这 一 点 将 在 下 面 证 明 . (具体 的 例子 : 设 ASn = pn5n-1 为 CRR - 模型 , 其 
中 pn 只 有 两 个 可 能 值 , 因此 条 件 概率 P(ASn є Я „_1) 仅 集 中 在 а5„—1 和 65-1 
两 个 点 上 ). 

蒜 测 度 的 唯一 性 (IM(P)| = 1) 也 是 加 在 滤波 (#„)„<у 构造 上 的 限制 . 原来 ， 
с 代数 FZ 自然 应 该 是 价格 So, 51,… ,Sn 产生 的 о- 代数 (只 是 现在 假设 Б, = 
1l,k < п). 关于 这 一 点 见 [100] 第 610 页 的 图 形 , 以 及 [100] 第 五 章 的 84e. 

2) 作为 证 明 蕴 涵 关 系 “|M(P)| = 1 完全 性 ”路 径 的 中 间 结 果 之 一 , 我 们 证 明 
如 下 的 重要 命题 , 它 给 出 了 无 仲裁 市 场 上 完全 性 的 等 价 特征 . 

引 理 2 ”为 了 使 无 仲裁 (B,S)- 市 场 是 完全 的 , 必要 而 且 充分 的 条 件 是 : 在 所 
ARAARA МР) 上 , 存在 具有 如 下 性 质 的 测度 P: ЕЖУ т = (т, Fn, 
Р)оспем› Ж “(5/В)- AR” 


= т 
УА (&) | (34) 


ЖРО << п) 是 某 一 可 预测 随机 变量 . 

证 明 引 理 a) 必要 性 ” 设 所 考察 的 (B, S)- 市 场 是 无 仲裁 的 和 完全 的 . (不 失 
普遍 性 , 可 以 认为 В, =1,0 <n < №). 

№ M(P) 中 的 任意 测度 Р, HHR т = (mm, 多 了)o<nsw ЖЖ 
(т. <с0 <n < №). iZ Ју = тм. 那么 ,根据 完全 性 的 定义 ( 见 定义 3), 存在 这 样 
的 总 存量 r* = (6*,7"), 使 X = fn, 且 对 于 一 切 0< ns< м, 有 


Ху =z+》 ЖА, (35) 
к=1 
其 中 z=X5 . 

由 于 ХХ = fn <c, 可 见 序列 XT = (Х`,# n P)ocnen ЖЕЙ ( 见 $1 定理 3). 
这 样 , 就 有 具有 同一 最 终 值 fw(XX = mw = fn) МЛЯ т 和 Хт". 但 是 , 根据 
WEHEN mn = Е(тх\#„) 和 Xx = Е(ХХ |Я „),0 < п < М. 因此 , 列 维 (P. 
P. Lévy) # т 和 Хт" 相等 . 从 而 , 由 (35) 式 知 , ЕФ т = (т, Я „,Р)о<п<м, 有 
“5 一 表现 ”: 

т„=т+ў MAS 1<n<N, 2 (36) 
к=1 
ЖФ = = то. 
b) 充分 性 ”现在 证 明 相反 的 结果 («5807 > 完全 性 ). 
根据 假设 的 条 件 , 存在 测度 Р є M(P) , 使 任何 有 限 Р ЖН “5- 表现 ”. 
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作为 这 样 的 拷 X = (Xn, F n, P)ocncn, W X = Ё(/у|#„) ЇЙЇ, 其 中 天 表示 
对 于 测度 Р 的 数学 期 望 , 而 fy 是 定义 3 中 提 到 的 “支付 委托 ”, 且 对 于 jw 需要 求 
自 筹资 金 总 量 r: X7 = ЛР - Al P-a.c.). 

ЖЕНЯ X = (Xn F „,Р)о<п<м, 考虑 其 “S- RM”: 


ВУ АВ (37) 
k=1 
其 中 ЖЖ Fri 可 测 随机 变量 . 
现在 证 明 , 由 此 可 见 , 存在 自 筹资 金 总 存量 元 = (0,7), 使 得 对 于 一 切 0< n < М, 
特别 对 于 Лу = Xw = хў, 有 定义 3 所 要 求 的 表现 ; 


n 
fn =X + DHASk. (38) 


k=l 
有 了 (37) R, 现在 设 5, = m 并 且 定 义 
В, = Xn – 18а. (39) 
由 (37) 式 可 见 , 随机 变量 0, 是 „_,— 可 测 的 . 这 时 , 有 


5„-1А% + ДВ, = 5-1% + AXn – Aln Sn) 
= 8,14% + 245 一 A(nSn) = 0. 


这 样 , 根据 第 三 小 节 , 所 建立 的 总 存量 元 = (8,1) 是 自 筹 的 , 并 且 X = fn, B 
ХАРЖ (В,5)- 市 场 是 完全 的 得 证 . 

于 是 , 引 理 3 ЕО 

3) 由 引 理 3 TA, 为 完成 定理 2 的 证 明 , 需要 证 明 如 下 一 系列 蕴涵 关系 : 


мр) -1| È [s 8 |45 [а | мо) =1]. 


在 证 明 引 理 2 的 “必要 性 ”时 , “蕴涵 关系 {1} ” ВЕ, «АКА (2р REII 
理 2. 

ЖА {3} 的 证 明 更 加 清晰 , 考虑 由 CRR - 模型 描绘 的 (В, 5)— 市 场 的 
特殊 情形 . 

上 面 ( 例 1) 曾 指 出 , 对 于 这 样 的 模型 , ВЕЛЕ Р 是 唯一 的 IM(P)| = 1). 因此 ， 
需要 弄 清楚 , 这 里 为 什么 (ЖЕЙ Р) s- 表现 ”成 立 . 原来 在 上 面 己 经 指出 ， 
关键 是 (4) 式 中 的 变量 pn 只 有 a A b 两 个 可 能 值 , 而 作为 这 一 事实 的 推论 , 条 件 分 
布 P{AS € 12,1) 全 部 仅 集中 在 两 个 点 上 (“条件 两 点 ”). 

这 样 , 考虑 例 1 中 引进 的 CRR - 模型 , 并 且 补 充 假 设 对 于 1 <n < М, In = 
olp- ,pn); 而 .Fo = (2,9). 以 表示 由 (27) 式 定义 在 (0,9 м) ЕН. 
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Я х = (Х„,#„,Р)о<а<м АНЯ, 则 存在 函数 д. = gn(z1,… ,zn), 使 
Х» (6) = gn(p1(w),… ,pn(w)), 因此 


АХ» = gn(P pn) — gn-1(p1,… ›Ёп-1)- 
由 于 Е(АХ,|Я 1) = 0, 可 见 
Фоп (рл, =: ›рп-1,®) — 9 (01° ›Ёп-ї,@) = #а—1(#1,°°° ›Ёп-1)› 


即 





gn(P pn 下 一 gn-ip ,Pn-1) 
了 
„ 9 Крь иза тиш pn-Da) (40) 


HF ĵ = (r – а)/(6– а),@ = (b — r)/(b — a), Ж (40) 式 可 见 
9" (р, *- > Р-1,6) — 9п-1(ф1›°** ,Pn-1) 
b-r 


mlp ›Ёп-1›а) — Ф100 Pai) (41) 
а= 











H jn({a};w) = (ры) = а), иһ({5};ш) = Ion(w) = b); 并 且 设 


М/л (ш, £) = galpi (w), > ›рп-1(%®),®) — #п-1(01(%),+ .Ра-1(0), 2), 


иди.) = HeD, 


由 于 这 些 记 号 , 可 见 
AXn(w) = Wn(w,pn(w)) = [= т)нл(ат;ш) = fe = т) (w, х) (дз; о). 


由 于 (41) Х, 可 见 Wiwe) 与 z AR. 如 果 将 (41) 式 的 左 侧 (或 等 价 地 将 右 侧 ) 的 
RF, WE ylw), ДИВ 





AXn(w) = 500) (раш) — т). (42) 
АШ ` 
Xn(w) = Хо) + 》 т (ш)[ок(ш) — т]. (43) 
К=1 
易 见 , 有 
A(Z) ы т 
由 此 , 得 


Bn- Sn 
Ра —т= (1 togta (в) , 
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故 由 (43) R, 可 见 


Xalo) = Хш) + ЎА (20) (и) 


к=1 


пе) = да +) а 


Ы (=) 
B Bn OgngN 


关于 测度 户 ЖЮ. FE, 上 面 引进 的 关系 式 (44) WE, X 关于 (基本 ) P- Ж 5/В 
的 “S/B 表现 ”. 

4) 在 CRR - 模型 (其 中 IM(P)| = 1) 的 蕴涵 关系 {3} 的 证 明 中 , 关键 是 变量 pn 
АЖ а 和 两 个 可 能 值 . 然而 , 结果 表明 , KERNE Р 唯一 性 的 假设 是 相当 强 的 
条 件 , 以 至 于 由 此 可 以 得 到 变量 p = А5„/5„-1 具有 “两 点 ”的 结构 : 存在 可 以 预 
测 的 量 an = an(w) Ж] bn = bn(w) ,使 


序列 


Blon = anlF n-1) + (ра = 19-1) = 1. (45) 


如 果 相 信 这 条 性 质 , 那么 上 面 所 作 的 CRR - 模型 中 “S/B- 表现 ”的 证 明 , 在 
一 般 情形 下 仍然 “适用 ”. 这 样 只 剩 下 证 明 (45) R. 在 假定 读者 独立 证 明 (45) 式 的 
正确 性 (练习 题 5) 的 情况 下 , 我 们 仍然 引进 某 些 启发 性 想法 , 说 明 具 备 鞭 测度 的 唯 
一 性 导致 “条 件 两 点 ”的 结构 . 

假设 Q = Q(dz) 是 (R,. 罗 (R)) 上 的 某 一 概率 分 布 , 而 © = &(т) 是 一 坐标 给 定 的 
随机 变量 (5(z) = т), 并 且 满 足 条 件 : Eqlé| < оо, Баё = 0 (ЧН); 而 测度 О 具有 
性 质 : 假如 б 是 满足 条 件 : Ealé| < co,E85 = 0 的 另 一 测度 , 那么 必 有 9 =9 (A 
测度 的 唯一 性 ”). 

可 以 证 明 , 测度 Q 的 承载 子 最 多 集中 在 两 点 (a < 0 和 b>0) 上 ,也 可 能 两 点 
都 " 粘 合 " 在 “ 零 " 点 (a =6 =0). 

5) 上 面 提 到 的 启发 性 想法 , 使 得 可 以 将 上 面 最 后 表述 的 、 十 分 近乎 情理 的 命题 ， 
可 以 叙述 如 下 . 

假设 测度 О 集中 在 rror} 等 三 个 点 上 , 而 且 三 个 点 是 有 序 的 : т. < zo < z+， 
其 质量 (权重 ) HEA q qoqi. 条 件 Бос =0 表示 


4-т- + фото + @+т+ = 0. 


АЕ то =0, Ма_т_ +41, =0. ® 
Е 1 о Ж Ч. (46) 
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即 把 在 点 r- Ма, 上 的 部 分 质量 д 和 q+“ 汲 取 到 ”点 то E. 

由 (46) 式 可 见 , 相应 的 测度 Q ~ Q, H Egé =0 ,而 且 @x#Q. 

但 是 , 这 与 具有 性 质 Еос = 0 的 测度 О 的 唯一 性 矛盾 

从 而 , 测度 О 不 可 能 集中 在 (z_,zro,z+) 三 个 点 上 , В zo = 0. 类 似 地 可 以 基 
于 “汲取 质量 * 的 思路 , 讨论 zo #0 的 情形 . (ЙЕЛ, [100] 的 第 V 章 $4e). 口 

7. 练习 题 

1. В РЛ, = 0} <1 ,对 于 М = 1 的 情形 , 证 明 无 仲裁 条 件 等 价 于 不 等 式 
(18) 成 立 等 价 

2. 证 明 , 第 4 小 节 引 理 1 的 证 明 中 , 条 件 (19) 排除 可 能 性 2). 

3. 证 明 , 第 5 小 节 例 1 中 的 测度 Р ERAR, 并 且 在 这 种 情形 下 在 M(P) 类 中 
是 唯一 的 . 

4. 讨论 第 5 小 节 例 2 建立 的 车 测度 的 唯一 性 . 

5， 证 明 , 对 于 变量 5„/В„(1 < п < №) 的 分 布 , 由 (B,S)- 模型 中 的 条 件 
|М(Р)| = 1 ,得 “条件 两 点 ”. 


812. 无 仲裁 模型 中 与 “套头 交易 ”有 关 的 核算 


1. 购 货 保留 权 (选择 权 ) ”进行 套头 交易 (hedge, 即 买 即 卖 ), 是 有 价 证 卷 总 存 
量 的 动态 管理 的 基本 方法 之 一 . 下 面 通过 所 谓 选 择 权 合同 (简称 选择 权 ) 核算 的 例子 ， 
阐述 这 种 方法 某 些 基 本 原理 和 结果 . 

作为 任意 有 价 证 券 , (金融 工程 的 工具 ) 选择 权 具有 非常 高 的 风险 . 然而 与 此 同 
时 这 些 工具 (及 其 与 其 他 有 价 证 券 的 组 合 , 例如 , 期 货 ) 被 成 功 地 利用 , 不 仅 为 通过 
“市 场 ”价格 的 变化 而 获得 收入 的 目的 , 而 且 在 “市 场 ” 价格 出 现 戏剧 性 变化 的 情况 
下 是 (选择 权 的 ) 保护 工具 . 

选择 权 (option, 选择 ) 指 金融 机 构 发 行 的 有 价 证 券 (合同 ), 在 协议 的 时 间 内 或 
者 在 事先 约定 条 件 下 的 时 间 , 赋予 买方 购买 或 出 售 一 定 的 价值 (例如 , 股票 , 债券 , 货 
T) 的 权限 . 

设计 选择 权 核算 的 基本 问题 之 一 , 在 于 按 何 种 价格 出 售 选择 权 ? 显然 , 卖方 希望 
获得 “尽量 多 ”, 而 买方 希望 付出 “尽量 少 *. 问 什么 价格 是 “正确 的 ",“ 合 理 的 ”, 是 
买方 和 卖方 应 该 都 可 以 接受 的 价格 ? 

АЖ, 这 一 “合理 的 ”价格 应 该 是 “明智 的 ". 具体 地 说 , 买方 应 该 明白 , 用 较 低 
的 价格 购买 选择 权 , 不 能 得 到 卖方 的 兑现 自己 义务 的 承诺 , 因为 它 所 得 到 的 “奖励 ”， 
有 可 能 简直 不 足以 保障 构成 “ 供 货 委托 ” 总 存量 . 

与 此 同时 , 这 些 “奖励 " 不 应 给 卖方 提供 “free lunch (免费 午餐 )” 一 类 的 仲裁 机 
会 , 即 得 到 无 风险 收入 的 可 能 性 . 
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在 给 出 应 如 何 理解 选择 权 的 “正确 ”价格 的 定义 之 前 , 我 们 首先 考虑 选择 权 一 
些 被 普遍 采用 的 分 类 . 

2. 购 货 保留 权 (选择 权 ) 的 类 型 ” 设 (F, (F nossen P) 是 过 滤 概 率 空间 ， 
Fo = {2,9}, В Fn =F. 考虑 定义 在 给 定 概率 空间 上 , ER п = 0,1,--:, Л 
ЗЕМ (В,5) 市 场 , 其 中 В = (В,)о<а<м. S = (5һ)о<п<м- 

下 面 考虑 的 选择 权 , 建立 在 股票 上 的 情形 , 假设 其 价格 由 序列 S= (Sn)osnsN 
描绘 的 . 

选择 权 按 的 执行 时 间 分 为 两 种 类 型 : 欧洲 型 和 美国 型 . 

如 果 选 择 权 可 以 表现 为 仅 在 合同 固定 的 时 间 N 进行 , 则 称 N 为 执行 时 间 , 这 
样 的 选择 权 称 为 欧洲 型 的 . 

如 果 选 择 权 可 以 表现 为 , 可 以 在 任意 马尔 可 夫 时 间或 者 停止 时 间 т = rw) 进行 
( 见 81 ÈX 3), Н т = r(w) 在 合同 的 条 件 中 , 预先 说 明 的 集合 {0,1,… , Лр 中 的 值 ， 
则 所 考虑 的 选择 权 是 美国 型 的 . 

按照 通用 的 术语 , 区 分 如 下 两 类 选择 权 : 

(1) 买方 选择 权 (call option®, 由 此 产生 了 的 术语 опцион-колл (购买 权 )) 

(2) 卖方 选择 权 (put option@, 由 此 产生 了 的 术语 опцион-пут (出 售 权 )). 

为 确定 计 , 我 们 考虑 欧洲 型 标准 选择 权 的 例子 . 

这 样 的 选择 权 由 两 份 合同 体现 : 执行 时 间 № 和 购买 价格 K (对 于 买方 ), 或 出 售 
价格 K (对 于 卖方 ). 

假如 , 万 一 在 时 间 N “市 场 ” 价格 Sw > K， 则 根据 合同 的 条 件 , 选择 权 的 买 
方 有 权 按 价格 к 购买 股票 ， 买方 同样 有 权 按 “ 市 场 ”价格 Sv 出 售 , 这 样 可 获 利 
Sw — К. 假如 结果 为 Sn < К, 则 协议 商定 的 按 价 格 K 的 购买 权 应 毫 无 疑义 地 采 
Я, 因为 可 以 用 较 低 于 “市 场 ” 价 的 价格 Sy 购 入 股票 . 

于 是 , 综合 这 两 种 情形 可 见 , 买方 在 时 间 № 的 收入 决定 于 量 : 





fy = (Sy ~ K)*, W 
其 中 对 于 任意 实数 uat = max(a, 0). 其 “ 纯 " 收入 等 于 ду 减 去 他 支付 给 股票 卖方 
的 “奖励 ” 

类 似 地 , 出 售 权 卖 方 的 收入 决定 于 量 : 


fn =(К-5м)*, (2) 
з. 完全 市 场 和 不 完全 市 场 ”在 定义 无 仲裁 (B, S)- 市 场 的 “合理 ”价值 , 应 当 
区 分 两 种 情形 : 完全 市 场 和 不 完全 市 场 . 


四 买 证 券 的 特权 , 买 期 货 的 权利 . 俄语 译 为 “onuwon-xonna ”. 一 一 ЖЖ 
@ 买 期 货 的 权利 . 俄语 译 为 “onuwou-nyt”. 一 一 ЖФ 
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定义 1 设 (B,S)- 市 场 是 无 仲裁 的 和 完全 的 . 完全 套头 交易 的 价格 , ШЕ 
CUw;P) = шт: Эл, (€ Хт, Хр = /м(Р-ас.)}, (3) 


称 做 欧洲 型 选择 权 的 “合理 ”价格 , 其 中 fw 是 FN 一 可 测 有 界 ( 非 负 ) 支付 函数 . 

关于 这 一 定义 我 们 指出 , WRK P- 概率 1 Ху > fn 则 称 总 存量 л 为 支付 
委托 的 费用 . 由 811 可 见 , 对 于 完全 无 仲裁 市 场 的 情形 , 存在 有 界 “ 支 付费 用 ”的 完 
全 套头 交易 п, 即 满足 XG = fw(P 一 a.c.) 的 т. 这 恰好 说 明 , 为 什么 在 定义 3 中 , 要 
考虑 具有 性 质 XN = Гу (Р - а.с.) 的 ( 非 空 ) 总 存量 类 . 

对 于 不 完全 无 仲裁 市 场 的 情形 , 自然 地 有 如 下 定义 . | 

ЖХ2 设 (B,5)-- 市 场 是 无 仲裁 的 . 超级 套头 交易 的 价格 , 即 价格 

C(fn;P) = а=: Эт, {Ë X =r, XN >/м(Р-ас.)}, (4) 


称 做 具有 F n- 可 测 有 界 ( 非 负 ) 支付 函数 fy 的 , 欧洲 型 选择 权 的 “合理 ”价格 . 

注意 , 该 定义 是 适 定 的 : 对 于 任何 有 界 函 数 fv, 一 定 存在 具有 初始 资本 т 的 总 
存量 ,使 X8 > (Р ас). 

4. 价格 公式 “现在 引进 CnP) 的 公式 , 并 且 对 于 完全 市 场 的 情形 给 予 证 明 ， 
而 对 于 不 完全 市 场 的 情形 , 介绍 专门 的 文献 ([100] 第 VI Ж $1). 

定理 1 1) 对 于 完全 的 无 仲裁 (B,S)- 市 场 的 情形 , 支付 函数 为 fy 的 欧洲 型 
选择 权 的 “合理 ”价格 , 决定 于 公式 


СОР) = Ве ДУ, (5) 
其 中 Ep 是 对 (唯一 ) ИЖАР юй. 


2) 对 于 一 般 不 完全 的 无 仲裁 (B,5) 一 市 场 的 情形 ,支付 函数 为 fN 的 欧洲 型 先 
择 权 的 “合理 ”价格 , 决定 于 公式 


Ср) = „зр BBs pr © 


其 中 sup а-и Ж M(P) Иен 
证 明 1) 设 是 某 完 全 套头 交易 , 其 中 X3 = г, Ху = jw(P - ac). ЖА, 有 


(М, 811 的 (15) Ж) ГЕ" К Б 
м Ху = k 
В = (2575 (СУ (7) 


因而 , 由 于 31 的 定理 з, 得 





Es = = (8) 
因为 , НЕ 
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可 见 在 “最 末 ” 时 间 №, 有 
z Š Sk fn 
atima) рхо ® 
注意 ,(8) 式 的 左 侧 不 依赖 于 , 所 考虑 的 初始 值 为 X# = z 的 套头 交易 т. 假如 现 
E т 是 初始 值 为 X8 的 另外 一 起 套头 交易 , 则 根据 (8) 式 其 值 仍 等 于 ВЕ, (/у /Вух). 
由 此 显然 , 对 于 一 切 完全 套头 交易 , 初始 值 z 是 同一 个 . 于 是 , 就 证 明了 (5) R. 
2) 我 们 在 这 里 只 证 明 不 等 式 
_ sup ВЕБ т Е < Clfn;P). (10) 
РЕМ(Р) 
(相反 不 等 式 的 证 明 , 要 用 到 所 谓 “ 选 择 权 ” 的 分 解 , 而 这 已 经 超出 本 书 的 范围 ; 见 
[100] 第 VI 章 的 81c) 和 $29)). 
假设 对 套头 交易 п, 有 ХЕ =, ХЕ > fn(P -ас.). 
那么 , 由 (7) 式 可 见 


Ета (#) > Eo. 
因此 , 对 于 任何 测度 了 e M(P) ,有 


въвь ў <: 


(对 照 (8) RAI (9) R). 于 是 , 如 果 该 式 的 左 侧 对 于 所 有 Р є М(Р) Ж sup, ш 
要 证 明 的 (10) 式 . 

5. 美国 型 购 货 保留 权 (选择 权 ) ”考虑 涉及 美国 型 选择 权 的 一 些 定义 和 结果 . 
于 这 样 的 选择 权 需 要 作 如 下 假设 : 给 定 涉及 时 间 М 的 不 只 一 个 支付 函数 fy, 而 是 
整整 一 组 函数 Ло, 有 1,… ,fv; 这 些 支 付 函数 的 含义 是 , 如 果 选 择 权 表明 买方 出 现在 时 
Мл, 则 (卖方 给 买方 选择 权 的 ) 相应 的 支付 决定 于 (F n- 可 测 ) 函数 fn = fn(w). 

以 + = r(w) 表示 值 域 为 {0,1,… N} 的 马尔 可 夫 时 间 . 假如 选择 权 的 买方 决 
定 在 时 间 т = r(w) 提出 要 求 执行 选择 权 , 则 支付 函数 等 于 frolo), 因而 有 价 证 券 
т 选择 权 的 卖方 永远 应 当 预 见 到 , 使 得 对 于 任何 т, 都 能 满足 套头 交易 的 如 下 条 件 : 
Xr >f(P -ac.). 

这 说 明了 如 下 定义 的 合理 性 . 

定义 3 ” 设 (B,5)- 市 场 是 无 仲裁 的 , 而 / = (nocis 是 Fn- 可 测 非 负 支 
付 函 数 у, Ж. 超级 套头 交易 的 最 高 价格 , 即 价格 


T(S; P) =inf{z : Эл, X =т,Х > fa(P — a.c.),0 < n < N}, (11) 
称 做 以 f = (加 )osnsN 为 支付 函数 系 的、 美国 型 选择 权 的 “合理 ”价格 . 
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对 于 美国 型 选择 权 的 情形 , 我 们 (不 加 证 明 地 ) 引进 定理 1 的 如 下 类 似 . 
定理 2 1) 对 于 完全 的 无 仲裁 (B,5) 一 市 场 的 情形 , 以 f= (所)osn<N 为 支付 
函数 系 的 、 美 国 型 选择 权 的 “合理 ”价格 , 决定 于 公式 











СР) = sup ВоВ, a2) 
TEMY т 


RP MY = {r:r <N} Я (ХТ (#„)о<п<м) 的 停 时 类 , жю Р Ж Ж. Ер 
是 对 (唯一 ) RAR P 的 数学 期 望 
2) 对 于 一 般 不 完全 的 无 仲裁 (B,S)- 市 场 的 情形 , 支付 函数 为 = (如 )o<n<N 
的 美国 型 选择 权 的 “合理 ”价格 , 决定 于 公式 
С(ЛР)= вр ЕД, (13) 
TEMY, PEM(P) т 
其 中 M(P) 是 一 切 鞭 测度 已 的 集合 . 
证 明 见 [100] 第 VI 章 的 $2с. 
6. 欧洲 型 购 货 保留 权 (选择 权 ) 上面 的 两 个 定理 回答 选择 权 如 何 决定 其 “ 合 
理 " 价格 的 问题 . 
在 得 到 “奖励 " C(fw;P) 和 С(/;Р) 之 后 , 选择 权 的 卖方 如 何 建立 套头 存量 r 
的 问题 也 同样 重要 . 
为 简便 计 , 我 们 的 叙述 仅 限于 考虑 欧洲 型 购 货 选 择 权 完 全 (В, 5) 一 市 场 的 情形 . 
定理 3 设 (B,S)- 市 场 是 无 仲裁 的 和 完全 的 . 
存在 自 筹 总 存量 T*(B",T*) ,其 初始 资本 为 XE = C(Jv;iP) , 并且 实行 完全 支 
付 义 务 fn 的 套头 交易 : 
ХЕ = fn(P -ac.). 


资本 Xr = В= В, + 5.00 <п< №) 的 变动 决定 于 如 下 公式 
ХІ = BnEs (№ я,) * (14) 
自 筹 总 存量 7* = (Вт) 中 的 分 量 у = (Mocny, ЖАБ XT = (XT )o<n<N 的 值 
由 公式 
“()-=@. o 


ЖЖ, 而 分 量 B* = (В)о<сп<м 的 值 由 公式 





Х = В.В, + т5л, (16) 


ЖЖ. 
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定理 的 证 明 可 以 直接 仿照 811 引 理 2 中 蕴涵 关系 

“完全 性 " > “号 一 表现， 

的 证 明 得 到 . 为 此 , 只 需 将 上 面 蕴涵 关系 的 证 明 用 于 黑 
m= посна, ma = Bp (07). 


т. 选择 权 实 际 核算 的 例 “作为 选择 权 实际 核算 的 例子 , 考虑 由 ССВ - 模型 


Bn = Bn-1(1 +r), 
Sn = Sn-1(1 + ра), 


ЖИЕ (В,5)- 市 场 , 其 中 pi,… ,pw 是 只 有 a М К-1 <а<т < Б) 两 个 可 能 值 
的 、 独 立 同 分 布 随机 变量 . 

这 样 的 市 场 是 无 仲裁 的 和 完全 的 ( 见 311 练习 题 3), 且 与 其 相 联 系 的 鞭 测 度 Р 
满足 : BP{pn =b} = P,P {pn = a} =& ҖОР 


(17) 








P= pa d= (18) 


(Ж. $11 第 5 小 节 例 1). 
根据 定理 1 的 (5) А, 对 于 所 考虑 的 (В, 5)— 市 场 ,“ 合 理 ” 价 格 为 


C(fn;P)=E (19) 


м 
Рак). 
故 根据 定理 3 求 完全 套头 交易 总 存量 п" (18°, 7"), 需要 首先 计算 


са -Bs (пу т” саса )， (20) 


EPF, =o(p1,… рн), 1 < п < М, В Я = {5,9}; 然后 由 公式 (15) 和 (16) Ж 
В" Ж ту". 
由 于 Х = С(/у;Р), 可 见 这 一 切 归结 为 , 对 于 = 0,1,… , N, Ж (20) RAW 
的 条 件数 学 期 望 . 
假设 #„— 可 测 函 数 fy 有 “马尔 可 夫 ” 结 构 , 即 fy = flSn), 其 中 f = Дт) 
是 z >0 的 某 一 非 负 函数 . 
记 n 
F(z;p) =} f(z(1 +5)" +а)"—®)СРА(1 — р)“. (21) 
k=0 
由 于 
П G+p)= +085701 + а) mw 
п<к<№ 
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EP Ak = dit ôn, M ôr = (pr – a)/(b — а), TI 


Es/f ( Па +=) = Fylt) RP= (22) 

п<к<№ 

而 考虑 到 
5м =5. [| (+), 
п<к<№ 

故 由 式 (21) 式 和 (22) 式 , 得 

好 в (Ин )=а+о-®ву- «(5ў): (23) 
特别 ， 

С(/м;Р) = XE = (1 + т) Fyn(So,D). (24) 


于 是 , 由 (15) 式 , 并 注意 到 (23) 式 , 可 见 
%-э(2)/5(ж) 


-п)Ём-п(5п-1(1 + b); P) — Fv-n(Sn-i(1+0);D) 





决定 于 





а (м 

= +”) а (25) 
AR 成 , 注意 到 В, 108; + 5„-1Ал = 0. 所 以 
ХЕ, = 8,8,1 +9453, (26) 
因此 а 
„ _ Ха- Tasa- 

В, = о (27) 

由 (23) 式 和 (25) 式 , 可 见 

в, = эу (а-ны) = Ppl +D 

-Fy-n(Sn-1(1 +а);)]}. (28) 


最 后 , 我 们 讨论 一 下 , 例如 , 在 买方 的 标准 选择 权 (购买 权 ) 的 情形 下 , 即 当 函 数 
fn = (SN - K)* №, “合理 ” 价格 C(fw,P) 的 公式 具有 何 种 形式 . 
Ж Ko = Ко(а,6, №; во/ К) 是 满足 如 下 条 件 的 最 小 整数 : 


Soll +a)” Con >K, я (29) 


312. 无 仲裁 横 型 中 与 “套头 交易 ”有 关 的 核算 -225 - 


к (н) GE) (30) 


其 中 [т] 表示 г 的 整数 部 分 . 





即 设 











如 果 记 
р 12р, дф Рет, 
而 
N 
В(Ко, N,p)= J. Chp" (l – р)", (31) 
k=Ko 


则 对 于 标准 购买 权 , 由 (24) 式 不 难 推导 出 “合理 ”价格 ( 记 作 Су) 的 如 下 ( 考 科斯 
罗斯 - 鲁 宾 斯 坦 ) 公式 : 


См = SoB(Ko, №; р*) — К(1 +7)-NB(Ko, М; ). (32) 


4 Ко > МВ См =0. 
注 由 于 
(K – 5м)+ = (Sn — К) — Sn + К, 


可 见 卖 方 的 标准 选择 权 (出 售 权 ) “合理 " 价格 Pw(= Cln P) RP fw = (К-5м)+) 
决定 于 如 下 公式 : 


Ру = 天 (1 + т) “(К ~ SN)+ = См – Ё(1 +r) Мм + К(1 г). 
因为 在 (1 + r)-NSx = So, 所 以 显然 有 “平价 购买 - 出 售 权 ” 恒 等 式 : 
Ру = См – 5 +К(1+г)-М. (33) 


8. 练习 题 

1. 对 于 811 第 5 小 节 例 2 中 的 (B, S)- 市 场 模型 , 求 标准 选择 权 的 出 售 权 的 
“合理 ”价格 : C(fw,P), 其 中 fn = (Sw — К)+. 

2. 试 证 明 (10) 式 中 相反 不 等 式 的 正确 性 . 

3. 证 明 (12) 式 , 并 试 证 明 (13) 式 . 
4. 证 明 (23) 式 详细 类 似 的 结论 . 
5. 证 明 (25) АЖ (28) R. 
6. 对 (32) 式 进行 详细 的 推导 . 
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813. 最 优 停 时 问题 . HA 


1. “合理 ” 价格 在 这 一 节 中 ， 我 们 假设 给 定 一 固定 的 概率 空间 (9,9, 
(F an)>0 P) 和 Fo = (2,9). т = r(w) 是 马尔 可 夫 时 间 (或 停止 时 间 ), 其 值 
RERE {0,1,…… , N} . 设 g 是 由 属于 集合 


{ш:т(ш)=п}є.#Ў„ (1) 


的 值 域 为 {0,1,… , N} 的 随机 变量 r= rw) Ж. 在 描绘 美国 型 选择 权 “ 合 理 ” 价格 
时 , 我 们 已 经 遇 到 过 有 关 停止 时 间 的 例子 . 具体 地 说 , 812 的 (12) 式 表明 , 对 于 简化 
了 的 条 件 ，B,, = 1,0 < n <N M P =P, 为 求 这 一 价格 , 需要 寻找 量 (也 称 做 “ 价 
№) 

У = sup Ед, (2) 

TEMY 
EP f= (fofis fn) EF n 可 测 非 负 函 数 f 的 序列 . 
设 r= r(w) є өлү 是 马尔 可 夫 时 间 . 与 问题 (1) 同时 , 对 寻求 量 (“价格 ”) 


У = sup Ef, (3) 
тєлє 

感 兴趣 , 其 中 MY = {r:r < оо}, 而 f= ofi) 是 多 可 测 随 机 变量 fn, 
n > 0 的 随机 序列 , E Е|/,| < оо. 

@ (2) 式 的 情形 一 样 , 对 于 情形 (3), 除 寻 求 “ 价 格 ”VN жым 之 外 , ( 若 上 确 界 
存在 ) 还 要 寻求 达到 上 确 界 的 时 间 . 

在 许多 问题 中 , 允许 考虑 可 以 取 +оо 为 值 的 马尔 可 夫 时 间 也 是 适宜 的 . 在 这 种 
情形 下 , 讨论 Ef, 时 应 当 约定 如 何 理解 foo 一 种 自然 的 方法 是 把 fo 视 为 的 Hn fn 
的 值 . 另 一 种 方法 是 , 允许 对 于 т 值 和 无 限 大 , 把 “价格 ”定义 为 


Ve = вир EfrI(7 < оо), (4) 
тє; 
К Mo 是 马尔 可 夫 时 间 类 , 即 一 切 马尔 可 夫 时 间 的 集合 Mo = {7 :7 < оо). & 
然 , Æ fo = 0, W 
Vo = sup Ef, 
тет 
(对 照 81 的 第 3 小 节 ). 

我 们 在 下 面 将 只 考虑 问题 (2). (关于 N = оо 的 情形 , АЖ УШ 章 89). 假如 不 
考虑 序列 / = (fo, 所,… Ра) 的 具体 购 造 , 则 问题 (2) 和 (3) 的 解法 是 下 面 描绘 的 
«В 方法 . (不 失 普遍 性 , 我 们 以 后 都 假设 对 于 一 切 < м, 有 ЕД. < со, 并 且 每 次 
不 再 特别 说 明 ). 
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2. 价格 最 高 的 时 间 N < оо. 现在 考虑 的 情形 可 以 看 成 “向 后 归纳 法 ”, 这 
里 用 下 面 的 方式 实现 . 
与 价格 VV 同时 引进 “价格 ” 


ум = sup Е/,, (5) 
тем 


ЖЭУ = {r:n <r <N} 是 对 于 一 切 we Q, А п < т(ш) < М 的 停 时 类 . 
对 于 ”= N - 1,… ,0, 同样 直观 地 引进 随机 序列 ом = (uy)o<n<N, 其 中 


о = Ја, шу = max{fn, Ве 3) (6) 
对 于 0< ns 和 N, 设 
т =шш{п<Кк<М:/к= v} (7) 


下 面 的 命题 可 以 完整 地 描绘 , 利用 所 引进 的 量 , 求解 (2) R (5) 式 的 最 优 停止 的 
问题 . 
定理 1 ”假设 对 于 序列 了 = (Л.Л, fN), 随机 变量 fmn > 0 A Fn- TA. 
1) 对 于 每 一 个 n(0 <n < №), 时 间 
т =тш{п<к< М: = р) (8) 


и = 


在 类 9MN 中 是 最 优 的 : 
Efry = sup Bfe (= 01). (9) 


2) 时 间 TN(0 <n <N) 在 如 下 的 “条 件 ” 意义 上 也 是 最 优 的 : (P 一 a.c.) 


Е(Лль|Я n) = ess ѕирЕ(/. |3). (10) 
тєлї 


“随机 价格 ” ess supE (fF n) 41%: 
тєл} 


ess supE(f |F n) = (Р—ас.) a1) 
TEMN 
Ж 
УМ = Evi. (12) 
%Жт=0, 则 
У = 00. (13) 
З ж п = №, 则 


УХ = Efy. (14) 
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З. 随机 变量 族 的 本 质 上 确 界 ”在 开始 证 明之 前 我 们 回忆 , 关于 (10) 式 中 使 用 
的 Я, 可 测 随机 变量 族 {6(w),a E 9} 的 、 本 质 上 确 界 ess supta(w) 的 概念 . 
acu 
下 面 的 情况 决定 了 引进 这 一 概念 的 必要 性 : 在 不 可 数 集合 и 的 情形 下 , 函数 
вир (0) € 9) 一 般 有 可 能 是 F- 不 可 测 的 . 
事实 上 , 对 于 任意 c e R， 


fo : sup в (6) < e} = Ге :&а(ш) < с}. 
这 里 ,集合 ha = (0:600) <} ЕЯ (ША. 是 事件 ). 然而 , 由 于 集合 区 的 不 
可 数 性 , 故 不 能 保障 ПА. = {0 : в (0) < ЕЯ. 
acu 
定义 设 (E(w): о є М} 是 随机 变量 族 (ИВ (оо, +оо) 的 Fn- 可 测 函 
数 族 ). 称 广义 随机 变量 5(w) ( 即 值 域 为 (一 co, +оо) 的 F n- 可 测 函 数 ) 是 随机 变量 
Ж (6.6) :as ш} 的 本 质 上 确 界 , 记 作 E(w) = ess supga (w), ШЖ 
а) 对 于 一 切 a € U, E(w) > ta(w)(P — а.с.), 
b) 由 于 对 于 , (广义 ) 随机 变量 nw), 对 一 切 a E u WE п(ш) > €a(w)(P — а.с.), 
可 见 E(w) < т(ш)(Р - а.с.). 
换 旬 话说 , 在 一 切 控制 随机 变量 cs(w),a є ц № (广义 ) 随机 变量 中 ，6(w) 是 最 
小 的 (广义) 随机 变量 . 
当然 , 首先 应 该 证 明 这 一 定义 富有 内 容 , 而 这 由 下 面 的 引 理 可 以 看 到 . 
引 理 ”对 于 任意 随机 变量 族 {Ea(w) : a E U), 存在 具有 定义 中 性 质 a) F b) 的 
随机 变量 E(w) ( 记 作 Elw) = ess Supéa(w), 一 般 为 广义 随机 变量 ). 
QE: 
存在 具有 同样 性 质 的 子 集 tlo Ccu, 并 且 作 为 这 样 的 随机 变量 , 可 以 取 随 机 变量 


Elw) = sup éa(w). 
оєйө 


证 明 首先 假设 所 有 变量 ilw) a є н ,一 致 有 界 (lfa(w)| < си ЕП, acet). 
设 4 是 下 标 ae 4 的 有 限 集合 . 记 


5(А) = (кеўе). 


ЖИ, 设 5 = sup S(4), 其 中 上 确 界 对 一 切 有 限 子 集 A C 4 ЖЖ. 
对 于 n>1, ДА, 表示 满足 
E (куе) >5- 1 


的 有 限 集合 An 
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= П, An. 由 于 这 一 集合 的 可 数 , 函数 
Elw) = sup alw) 
aEto 


Fn- 可 测 , 因此 是 随机 变量 . (注意 , 由 于 |é(w)| < с, 可 见 go) 是 普通 的 , 而 不 是 
广义 随机 变量 ). 

由 随机 变量 E(w) 如 上 的 构造 可 见 (练习 题 1), 它 满足 上 面 定义 中 的 条 件 a) 和 
b). 

因而 , 在 随机 变量 族 {ce(w) : a єн} 一 致 有 界 的 情形 下 , 就 证 明了 上 确 界 的 存 
在 性 . 
在 一 般 情形 下 ， 需 要 首先 由 随机 变量 с (о), 转换 为 有 界 随机 变量 Ew) = 
arctan Eu(w), 使 之 满足 js(w)| < x/2,a є 出 we ,然后 建立 Elw) = esssupea(w)， 

随机 变量 є. (о) = tan ee(w) 满足 本 质 上 确 界定 义 (练习 题 1) 的 条 件 a) 和 b). 

4. 定理 1 的 证 明 

ЗЕЯ 固定 上 标 N, 而 为 简便 计 现在 将 其 略 去 . 

WR n= №, Д] ом = fv Н ту = N, 故 性 质 (9) ~ (12), (14) 显然 . 现在 用 归纳 
法 证 明 . 

设 对 于 n= N,N - 1,…… ,上 ,定理 的 论断 已 经 得 证 . 现在 证 明 对 于 n= 上 -1, 定 
理 的 论断 也 成 立 . 

ЖЕ, 1(= 975) ТАС Fk1. Ж ЖЕН] F E Me, т = тахт, К). 由 
Ч те» 且 事 件 {r >k} e Fpi, 可 见 


El[lIafr] = ElIantr=k-1}fr] + ElIantr>k}fr] 
= Elantr=k-1}fr] + Ellan (ЛЯ к-1)] 
= ElIantr=k-1}fr] + Еее) EIES Fk-1)] 
< Е Глок №] + Е[ТАсцт>куЕ(ик|Ў k-1)] < Elave]. (15) 


由 于 集合 AHF ri- 可 测 性 , 由 此 可 见 , 对 于 任意 设 re 9, 1(Р 一 a.c.)， 
E(f lF k-1) < vk-1- (16) 
现在 证 明 , 对 于 时 间 i, 依 P- 概率 1, 有 
E(fri lF k-1) = wk- (17) 


(假如 能 证 明 该 式 , 则 由 (16) 式 可 见 , 对 于 п = 上 一 1, ХЖА (10) 和 (11) 也 成 立 ). 
为 此 , 只 需 证 明 , 对 于 т = тъ, 实际 上 (15) 式 到 处 为 等 式 . 
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像 (15) 式 那 样 开 始 , 并 注意 到 根据 (5) 式 的 定义 在 集合 (71 > k} 上 = т, 
则 (根据 归纳 法 的 假设 ) 由 Е(7,, 12) = w(P 一 a.c.), 可 得 


Efla fri] = Е[Тягс{т-=к-1}/к-1] + ElTantn 12k}B(fn NF к-1)] 
= Една, аки ЛИ] + Век 1 к-1)] 
= деца =k-1} fk] + Elantn_ а>) Ell SF к-1)] = Е[ТАзк-1], 


其 中 在 证 明 最 后 一 个 等 式 时 , 根据 (6) 式 , 有 : ъ—1 = шах( fki, (ак Я 1); 由 此 
可 见 , 在 集合 (т. = 上 一 1} Еж: = fr- 而 在 集合 {7k-1 > 一 1} = {Tk-1 > k} 
上 vk- > fei (因此 , 在 这 一 集合 上 от = ЕЯ -1)- 

这 样 , 性 质 (17) 得 证 . 像 前 面 已 经 指出 的 那样 , 该 性 质 连同 (16) RUE T Ak 
证 的 关系 式 (10) 和 (11). 

由 这 些 关 系 式 可 见 , 对 于 re 9Л„(= ЛУ), (Р 一 a.c.) 有 


vn = E( fr, |F n) > EF n). (18) 
从 而 , 注意 到 0 = wn, 由 此 可 得 


Еу = Е/„ > зар Еу, = VN, (19) 
TEMN 


而 这 就 证 明了 欲 证 的 关系 式 (9) 和 (12). 

性 质 (13) 是 如 下 两 个 性 质 的 特殊 情形 : 1) 性 质 (13) 是 性 质 (12) 当 n=0 时 的 
情形 , 2) vy 是 常数 (因为 由 (11) R, 以 及 o- КЖ Fo = (2,0) 是 平凡 的 ) 最 后 ， 
等 式 (14) Ч п = N 时 是 定义 (5) 的 推论 . 口 

Б. 最 优 停 时 的 “ 拷 ” 视 角 ”为 显示 所 研究 的 最 优 停止 问题 的 “ 鞭 ” 视 角 , 现在 
讨论 序列 vN = (оу, о, uN), 的 递 推 关系 式 (6), 其 中 v = fn 是 “边界 ”条 件 . 

由 (6) 式 可 见 , 对 于 每 个 mn = 0,1…,N-1l(P-ac) 有 


vN > fa (20) 
о > ЕЯ n). (21) 


第 一 个 不 等 式 在 这 里 表示 , 序列 v 控制 序列 / = (fo, Л, ,fn). 第 二 个 不 
BRER, 序列 v 是 “术语 ” 值 为 vW = fw Еж. 这 样 , 可 以 说 , 序列 о = 
WR, oN, ,00), 其 中 由 (6) RR (11) 式 决定 于 的 量 „у, Ж ЕЮ ДЕР] / = 
(fos fisa fN). 

换 一 种 说 法 , 这 表示 序列 о 属于 序列 YY = (WIN) Ж, р > 
fn, 且 对 于 一 切 n=0,1,… ,NN 一 1,(P - ac.) 满足 “ 变 分 不 等 式 ” 


ау > max(fn, Е (119 n))- (22) 
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但 是 序列 wx 具有 如 下 补充 性 质 : (22) 式 不 仅 是 “不 严格 "不等式 “>”, 而 且 就 是 
等 式 “= (A (6) R). 根据 这 条 性 质 , 就 可 以 用 如 下 方式 从 序列 YY = (9,9, , 
WN) 类 GER ой > Лу) P, 划分 出 序列 ол. 

定理 2 ”序列 vv 是 最 小 上 鞭 的 控制 序列 了 = (fofi fn) 

证 明 事实 上 , 由 于 oN = Гу, ЇЇ ү} >. 可见 YN > ох. 由 此 以 及 (22) АЖ 
(6) >, (Р-а.с.) 有 


IN > max(fn-1, ЕО м-а)) > шах(/у—1, ВЫ Я м-1)) = vN- 


类 似 地 , 对 于 其 余 < N - 1, 可 得 YX >}. 
Ж 该 定理 得 结果 可 以 表述 为 如 下 形式 : 递 推 方程 组 


oN = max(fn, E(u aF ,)), п< М, 
的 解 UN = (оу о, 5), ЖФ ой = Л, 是 递 推 不 等 式 组 
WN > max(fn, EONMINFn), п< М, (23) 


一 切 可 能 解 YY = (У.т. 010) 中 最 小 者 , 其 中 YN > Ум. 

6. 停 时 集 与 继续 观测 集 ”定理 1 和 定理 2, 不 仅 描绘 寻找 价格 V = sup Ef 
的 方法 , 其 中 上 确 界 在 马尔 可 夫 类 时 间 оду 上 求 , 但 同时 表明 如 何 求 最 优 时间 ту, 
即使 Efix = VO 的 时 间 . 


根据 (8) 式 
т = minf0 < k < N : v=}. (24) 
在 求解 关于 最 优 停 时 问题 时 , 如 下 这 一 停 时 тоу 的 等 价 描绘 很 重要 . 设 
DY = {0:0 (ш) = fn(w)} (25) 
和 


ON = ADY = {w :0 (ш) = Во Я „)(ш)}- 
ER, DY = 9,CN = ож 


DY срУс,...,сру =Q, 


cA роо 2,- 20N = е. 
由 (24) 和 (25) 式 可 见 , 时 间 次 可 由 下 列 形 式 定义 
т = min{0 <k < N :w EDF} (26) 


自然 , 称 区 域 DA 为 “ 停 时 集合 ", 称 区 域 CR 为 “继续 观测 集合 " 这 些 术语 的 
正确 性 有 如 下 根据 . 
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假设 时 间 п = 0, 并 将 集合 О 划分 为 两 个 集合 DY 和 с, E DUY = 
Q, DY NOX = в. WR w e ОХ, W т (ш) = 0. 换 句 话说 “停止 " 发 生 在 时 刻 п = 0. 
而 车 w є СХ, 则 说 明 对 于 这 样 的 w, 时 间 т (ш) > 1 . 对 于 所 考虑 的 we ру ГС 
的 情形 , 时 间 次 (wo) = 1. 以 下 各 个 阶段 的 情形 类 似 . 在 时 刻 N 观测 自然 应 该 停止 . 

7. 例 现在 举 几 个 例子 . 

例 1 设 序列 f= (jo, 所 ,… ,fn) ER, 其 中 fo = 1. ЖА, 根据 $2 定理 1 的 
系 1, 对 于 一 切 马 尔 可 夫 时 间 т є ЭЛУ,Е/, = 1. 因此 , 在 所 考虑 的 情形 下 


ИХ = вир Efr=1. 
TEMY 


对 于 一 切 1< n < М, 函数 wy = fa Ay =1. AA, т = mnk SN: 
=} = 0, 而 对 于 任意 1< ms М, т =n. 

TE, ЖУКИ, KEEPA: 最 优 停 时 就 是 时 间 
т{ (ш) = 0ш є © (任何 其 他 时 间 , 如 т (ш) =n,we 9,1<n<N 也 一 样 ). 


#12 ВЯ f= (Ло л.) ЖТ, 则 对 于 任何 re Элу, Н Ef, < Efn 
(82 定理 1). 因此 , 这 里 的 最 优 停 时 7* = М. В ох = ЕЯ») > (Р — a.c), 
故 完全 可 能 停 时 т (м) 对 于 某 个 we О, 小 于 М. 然而 , 在 任何 情形 下 停 时 тж 
时 r* = N 都 是 最 优 的 . 虽然 停 时 r = N 有 简单 的 构造 , 但 是 停 时 ту 具有 一 定 的 
优越 性 : 它 在 全 部 可 能 的 最 优 停 时 中 是 最 小 的 , 即 如 果 也 是 类 2 中 的 最 优 停 时 ， 
M P{r < 7} =1. 

例 3 设 序列 S = (fofo ,fn) ЖЕ. ЖА, 对 于 一 切 0 < n < л, 有 
uN = fa. 从 而 , 像 扶 的 情形 一 样 , 最 优 停 时 为 站 = 0. 

所 引进 的 例子 相当 简单 , 解 所 考虑 的 停 时 的 最 优 性 问题 , 本 质 上 并 未 用 到 在 定 
理 1 和 定理 2 中 阐述 的 理论 . 只 用 到 如 下 熟知 的 结果 : 在 对 马尔 可 夫 时 间作 时 间 变 
换 时 (М 52), ЖЕ, ТЕН ЕЕЕ. 然而 , 在 一 般 情 形 下 , 寻求 价格 VW, 
以 及 最 优 停 时 7 的 问题 , 可 能 是 相当 困难 的 问题 . 

非常 重要 意义 的 是 , 函数 |, 具有 如 下 形式 的 情形 : 


fn(w) = F(Xn(w)), 


其 中 X = (Xn)n>o 是 某 一 马尔 可 夫 链 . 由 第 八 章 89 可 见 , 这 时 求解 最 优 停 时 问题 ， 
实质 上 归结 为 求解 变 分 不 等 式 , 求解 瓦尔 德 一 贝尔 曼 (А. Wald - В. E. Bellman) 动 
态 规划 方程 问题 . 

在 第 八 章 的 89 中 还 将 要 给 出 , 非 平凡 例子 , 在 这 些 例子 中 , 将 给 出 关于 马尔 可 
夫 序 列 最 优 停 时 一 系列 问题 的 全 解 . 


s13. 最 优 停 时 问题 . H 233. 





в. 练习 题 

1. ® E(w) = вор Ealo) 是 , 在 证 明 第 3 小 节 的 引 理 时 引进 的 随机 变量 . 证 明 满 
足 本 质 上 确 界定 义 中 的 条 件 a) 和 b). (提示 : 在 a g tn 的 情形 下 考虑 Е тах(&(ш), 
Ealw))). 

2. 证 明 , 1) 随机 变量 E(w) = ав (о) (ЖЖ 3 小 节 引 理 的 证 明 ), 2) 随机 变量 
Elo) 也 满足 条 件 a) A b). 

3. 设 &1,62,… 是 独立 同 分 布 随 机 变量 序列 , 其 中 El&1(w)| < оо. 考虑 最 优 停 时 
问题 (在 类 MP = {7:1 <r < оо) P): 

и = зар. Е (зе - =) Я 

В т" = inf{n > 1: En > А*}, 其 中 A 是 方程 B(&1 — А") = с 的 唯一 解 . 

证 明 , WR Е{т" < оо} = 1, 则 在 Е(тах,<, & (0) — ст) 存在 的 所 有 有 限 停 时 7 
Жүр, 停 时 т* 是 最 优 的 . 同样 证 明 V* = А". 

4. 假设 在 该 题 和 下 题 中 , 有 

MP = {T:n <T < оо}, 
ү? = sup ЕЛ, 
rema 
090 = esssupE( f |F n), 
тет» 
TR =inf{k >n:v = fn}. 
假设 
Esup f; < оо, 


证 明 , 对 于 随机 变量 的 极限 


vn = Ша ом, 
N 一 oo 
下 列 命题 成 立 : 
(а) ШЖ т є mx 停 时 , Д] 
0. > Е(/-\# n); 


(b) 如 果 12 є Me 停 时 , 则 
Ün = ЕЯ n), 


Ün = V (- нл?) . 
тех 
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5. Я тоо emg. 由 上 题 的 论断 (a) 和 (b) 证 明 , ВУ тоо 按 如 下 意义 是 最 优 的 : 


esssupE(f |F n) = El frz Fn) (Р—ас.), 
теля 


sup Ef, = Efix, 
TEM 
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$2. 
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定义 和 基本 性 质 (238) 


1. 引言 (238) 

2. 广义 马尔 可 夫 链 (238) 

з. 马尔 可 夫 性 (239) 

4. 随机 游 动 (241) 

5. 广义 马尔 可 夫 性 (243) 

6. 数组 (r, Pi, Р»,---) 决定 的 马尔 可 夫 链 (244) 

т. 马尔 可 夫 链 (Ж) (246) 

8. RARER - 查 普 曼 方程 (任意 状态 空间 ) (247) 
9. 练习 题 (248) 


推广 马尔 可 夫 性 和 强 马尔 可 夫 性 (249) 


1. 推广 马尔 可 夫 性 (249) 
2. 强 马尔 可 夫 性 的 另 一 种 推广 (251) 
3. 强 马 尔 可 夫 性 的 例 (252) 

4. 柯 尔 莫 戈 洛 夫 - 查 普 曼 方程 (254) 
5. 练习 题 (256) 


马尔 可 夫 链 的 极限 、 遍 历 和 平稳 概率 分 布 问题 (256) 


1. 广义 马尔 可 夫 性 (256) 
2. 要 研究 的 主要 问题 (257) 
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3. 练习 题 (258) 


34. 马尔 可 夫 链 的 状态 按 转移 概率 矩阵 的 代数 性 质 分 类 (258) 


1. 转移 概率 矩阵 (258) 

2. 可 达 状 态 和 可 通 状 态 (259) 
3. 按 周 期 对 状态 分 类 (261) 
4. 不 可 约 马尔 可 夫 链 (262) 
5. 练习 题 (264) 


$5. 马尔 可 夫 链 的 状态 按 转移 概率 矩阵 的 渐 近 性 质 分 类 (264) 


1. 常 返 和 非常 返 状 态 的 概念 与 准则 (264) 

2. 非常 返 状态 (268) 

3. 常 返 状态 (269) 

4. 马尔 可 夫 链 的 状态 按 转移 概率 矩阵 的 渐 近 性 质 分 类 (269) 
5. 常 返 和 非 周期 状态 下 转移 概率 矩阵 的 渐 近 性 质 (269) 

6. 状态 周期 任意 的 情形 (272) 

7. 非 周期 马尔 可 夫 链 的 完全 分 类 (273) 

в. 有 限 马 尔 可 夫 链 (274) 

9. 练习 题 (275) 


86. 可 数 马尔 可 夫 链 的 极限 分 布 、 遍 历 分布 和 平稳 分 布 (276) 


. 极限 值 ]0[ 与 平稳 分 布 Q 的 联系 (276) 
. 平稳 分 布 和 遍历 分 布 的 基本 定理 (278) 
. 定理 2 的 证 明 (279) 

. 定理 3 的 证 明 (281) 

. 定理 3 的 推广 (281) 

练习 题 (283) 


87. 有 限 马尔 可 夫 链 的 极限 分 布 、 遍 历 分 布 和 平稳 分 布 (283) 


1. 有 限 链 转移 概率 的 渐 近 性 质 (283) 
2. 不 可 约 性 和 非 周 期 性 对 有 限 链 的 意义 (284) 


© а ж» бф мю е 


58. 作为 马尔 可 夫 链 的 简单 随机 游 动 (284) 


1. 简单 随机 游 动 . 波 利 亚 (G. Polia) 定理 (284) 

2. 简单 随机 游 动 的 例 (Е с 24, а = 1) (288) 

3. 利用 简单 随机 游 动 描绘 现实 物理 过 程 的 示例 (293) 
4. 现实 物理 过 程 的 示例 (更 加 复杂 的 情形 ) (295) 


第 八 章 ”形成 马尔 可 夫 链 的 随机 变量 序列 


* 237- 





$9. 


5. 关于 术语 “离散 扩散 模型 ”的 说 明 (295) 
6. 练习 题 (296) 


马尔 可 夫 链 的 最 优 停 时 问题 (296) 


1. 这 一 节 的 基本 内 容 (296) 

2. 一 步 转移 算 子 (296) 

3. 最 优 停 时 (297) 

4. 停止 区 域 和 继续 观测 区 域 (299) 
5. 类 MP 中 的 最 优 停 时 (299) 

6. 例 (306) 

7. 最 优 对 象 的 选择 问题 (307) 

8. 练习 题 (312) 
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现代 马尔 可 夫 过 程 论 的 源泉 ,一 方面 是 ,马尔 可 夫 (А. А. Марков) 有 关 “ 联 系 为 
Ж” 的 试验 序列 (1906 年 — 1917 +) 的 工作 ; 另 一 方面 是 , 著名 布朗 运动 的 物理 现象 
之 数学 描述 的 尝试 ( 巴 切 利 耶 [L. Bachelier]. 1900 年; 爱 因 斯 坦 [A. Einstein], 1905 年 ). 


邓肯 (Е. Б. Ionkwn)《 马 尔 可 夫 过 程 》[21] 





81. 定义 和 基本 性 质 


1. 引言 在 第 一 章 812 H, 对 于 有 限 概 率 空间 , 阐述 了 基于 对 随机 变量 马尔 可 
夫 相 依 性 的 理解 和 原理 (第 一 章 812 中 性 质 (7)), 马尔 可 夫 相 依 性 用 来 描绘 , 具有 无 
后 效 性 系统 的 演变 . 在 这 一 节 , 对 更 加 一 般 的 概率 空间 进行 相应 的 研究 . 

马尔 可 夫 理 论 的 基本 问题 之 一 , 就 是 研究 无 后 效 系统 (随时 间 的 发 展 ) 的 渐 近 性 
Ж. 非常 值得 注意 的 是 , 在 相当 广泛 的 条 件 下 , 这 样 系统 的 演变 似乎 “忘掉 了 ” 它 初 
始 的 状态 , 其 状态 * 趋 于 稳定 ”, 系统 进入 “平稳 状态 "， 接 下 来 对 用 “具有 可 数 种 状 
态 的 马尔 可 夫 链 ”, 详细 地 描绘 这 样 系统 的 渐 近 状态 问题 . 为 此 , 我 们 需要 对 “马尔 可 
夫 链 ”的 状态 , 按 转移 概率 的 代数 性 质 和 渐 近 性 质 进 行 分 类 . 

2. 广义 马尔 可 夫 链 ”假设 QOF, (Я nno P) 是 固定 的 概率 空间 , MRAR 
外 选 定 附加 构造 的 概率 空间 (О, 77, Р), 而 所 谓 附 加 构造 就 是 o- 代数 F „(п > 0) 
的 、 过 滤 结 构 ( 流 ) (F nno EP Яо СЯ, С. СЯ. HRE, Fn EERE п 
之 前 (包括 п) 获得 的 “信息 ”. 

设 (Е,&) 是 某 一 可 测 空间 , 是 所 研究 的 系统 取 值 的 状态 空间 由 于 “技术 ”的 
原因 (例如 , 为 了 使 随机 元 素 Xo(w) 和 z є E 的 集合 {w : Xo(w) = =} 属于 Я), R 
们 假设 o- 代数 多 包含 Е 中 的 全 部 单 点 集 .( 关 于 这 一 假设 , 亦 见 下 面 的 第 6 小 节 ). 

在 这 样 的 假设 下 , 可 测 空间 (已 ,8) 通常 称 为 (所 研究 系统 的 ) 相 空间 或 状态 空 
间 . 

定义 1 (广义 马尔 可 夫 链 ) # (о? (F n) P) 是 固定 的 概率 空间 ， 而 
(Е,&) 是 相 空间 . 

定义 在 空间 (QF, (F ,)>о.Р) Е. ВИНТ Е 的 9 /#— 可 测 随机 元 Х„ = 
Xn(w),n > 0, 的 序列 X = (Xn)nz0, 称 为 由 马尔 可 夫 相 依 性 联系 的 广义 随机 变量 序 
Я (马尔 可 夫 链 ), 如 果 对 于 任意 n>0 和 Be 多 满足 如 下 广义 马尔 可 夫 性 ®: 


Р(Х... € BIF „)(0) = Р(Х, Е BIXn(w)) (P –а.с.). (1) 


四 广义 马尔 可 夫 性 (wide — sense Markov ргобепу) 亦 称 弱 马 尔 可 夫 性 (weak Markov proberty). 
一 一 译 者 
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如 果 FX = o(Xo,X1,… ,Xn) 是 由 随机 变量 Xo, Xi, ,X 生成 的 c- 代数 ， 

则 由 于 FX E GZ, ВХ, Я Я 可 测 , 故 由 (1) 式 得 强 马尔 可 夫 性 (或 简称 马尔 
可 夫 性 ): 

P(Xnrie ВІ о) = Р(Х, € BIXn(w)) (Р—а.с.). (2) 


为 直观 计 (对 照 第 一 章 510), 强 马尔 可 夫 性 常 表示 为 : 
P(Xn+1 Є BIXo(w), ,Xn(w)) = Р(Х Є BIXn(w)) (P — а.с.). (3) 


Zh (1) 式 引出 的 强 马尔 可 夫 性 (2) 的 启发 , 可见 在 事先 不 考虑 o— 代数 流 
(F nno 的 情况 下 , 引进 马尔 可 夫 相 依 性 的 概念 较为 适宜 . 

定义 2 (马尔 可 夫 链 ) 8 (0.7.р) 是 概率 空间 , 而 (EE) 是 相 空 间 . 取 值 于 
ЕН Я /#— 可 测 随 机 元 Х„ = Xn(w) 序列 , X = (Xn)n>o, 称 为 由 马尔 可 夫 相依 性 
联系 的 广义 随机 变量 序列 (马尔 可 夫 链 ), 如 果 对 于 任意 n>0 和 ВЕД, 强 马尔 可 
夫 性 (2) RX. 

E 在 一 开始 引进 的 过 滤 概 率 空间 上 , 在 此 空间 上 根据 各 种 不 同 的 “信息 流 ” 
(F nno 研究 系统 的 性 质 . 在 此 空间 上 定义 的 广义 马尔 可 夫 链 , 在 许多 问题 中 是 有 
效 的 , 例如 , 可 能 出 现 这 样 的 情况 : 对 于 “二 维 ” 过 程 (X,Y) = (Xn, yj)n>0， 其 第 一 
个 分 量 X = (Xn)n>o 按 定义 (2) 不 是 马尔 可 夫 过 程 , 然而 按 定义 (1) 是 马尔 可 夫 过 
程 , 其 中 F， = Я" п>0. 

在 介绍 马尔 可 夫 链 的 初等 理论 时 , 通常 并 不 引进 o 一 代数 流 (Fn) 而 且 以 
定义 2 作为 基础 . 这 一 章 的 内 容 就 是 讲 马尔 可 夫 链 的 初等 理论 . 

3. 马尔 可 夫 性 ”在 由 序列 X = (Xn)n>o 描绘 的 系统 状态 的 演变 中 , 马尔 可 夫 
性 的 特征 是 “无 后 效 性 ”. 在 有 限 空间 О 的 情形 下 , 在 第 一 章 812 中 , 表示 为 性 质 


P(JIGX) = P(JIX), (4) 
其 中 ] -一 将 来 , G 一 一 过 去 , X 一 一 现在 . 这 在 第 一 章 812 中 曾经 指出 , 马尔 可 
夫 系 统 还 具有 如 下 性 质 : 

Р(СЛХ) = Р(С|Х)Р(ЈІХ), (5) 
表示 在 “现在 ”固定 的 情形 下 ,“ 过 去 ”和 “将 来 ”独立 . 

在 一 般 情形 下 , 下 面 的 定理 , (在 定义 2 意义 上 ) 给 出 了 马尔 可 夫 性 的 各 种 不 同 

表述 , 并 指出 性 质 (6) 和 (7) 是 性 质 (4) 和 (5) 的 类 似 , 使 用 了 如 下 记号 : 

F Dn = 0(Хо, XI ,Xn); 

F се) = 0(Ха, Хан), 

Я) = 0(Хи+1, Xn+2,.…)- 
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定理 1 马尔 可 夫 性 (2), 等 价 于 如 下 两 条 性 质 中 的 任意 一 条 : 
1) Яп >0 和 任意 “将 来 的 ”事件 J < Уу, 有 


POF Bn) (o) = Р(ЛХ, (0) (Р-ас.), (6) 
2) 对 于 n> 1 以 及 任意 “将 来 的 ”事件 了 є Я 和 “过 去 的 ”事件 G e 
ЯВ 有 
P(GJIXn(w)) = Р(С\Х„(ш))Р(ДХ„(ш)) (Р-ас.). (7) 
证 明 (а) 我 们 首先 证 明 性 质 (6) 和 (т) 的 等 价 性 . 
(6)=(7). (P – а.с.) 有 
P(GIXn(w))P(JIXn(w)) = Е(Тв|Х„(ш))Е(1;\Х„(ш)) 
= Е{вЕ(1;|Х„(ш)Х„(ш))} = Е ЗЕЯ Ba) (wo) 6} 
= BE{E |F ии (0) = Е{Тв1;\Х„(ш)} = P(GJIXn(w)). 


(7) (6). 需要 证 明 , 对 于 任意 集合 Ce bnp 有 
Е[СР(Ј1Х,) = Ec POF ia) (6) 


为 此 , 首先 考虑 这 样 集合 的 特殊 情形 , 即 集合 GX, 其 中 Ge Я, 和 Xe o(Xn)， 
并 且 证 明 这 时 由 (7) 式 可 得 (6') R. 
事实 上 ， 


BlloxP(JIXn)] = BITGIXEGIXn)] = 了 {IxEIIGE(DIXn)IXn]} 
= E{IxE(o|Xn)E(DIXn)} = E{IxP(GIXn)P(IIXn)} 
DE{IxP(GIIXn)} = P(GXJ) = ЕИсхР(Я 0) (8) 


即 对 于 形 如 GX 的 集合 C, (6') 式 成 立 , 其 中 G < Fini 和 X E о(Х„). 根据 
“单调 类 ”的 性 质 ( 见 第 二 章 82), 由 此 可 见 , 对 于 任意 集合 Се F inp ER (6) 成 
X. 因为 函数 POX) 为 F pn- 可 测 , 所 以 由 (6') 式 可 见 .P(J|Xn) 是 条 件 概率 
POF n) 的 变 式 , 于 是 , 性 质 (6) 式 成 立 . 

(b) 现在 证 明 性 质 (2) 和 (6) 等 价 , 因此 由 已 证 明 的 , 可 见 性 质 (2) 和 (т) 等 价 、 
(6)=(2) 显然. 现在 证 明 (2)-ә (6). 仍然 利用 “单调 类 ”的 性 质证 明之 . 

А (6) 中 集合 J 是 o- КЖ Pd) = 中 的 子 集 , 而 ЧИ ео) 是 代 
数 о Finin BFR o- 代数 , 其 中 ЗЯ таны = (Хз, ,Xn+k). 因此， 


自然 首先 对 于 o- 代数 Fiane) 中 的 集合 J 证明 性 质 (6). 
我 们 用 归纳 法 来 证 明 . BA k= 1, ни = 0(Xn+1), А (6) 式 恰好 是 
(2) R, 故 命题 成 立 . 
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现在 假设 (6) 式 对 于 某 个 上 > 1 成 立 , 我 们 证 明 (6) RHF k +1 RX. 
为 此 取 形 如 J= + HRA J < Як RP I E F ihpin 和 
J? € о(Ха+к+а). ЖА, 根据 归纳 法 的 假设 (Р - a.c.) 有 
РЯ n) = Е а) = Вало бы) = EUn ЕТ: nal В] 
= ЕШ E(z| Xn) В = Из Е(1з]Х„+ь)|Х„] 
= ЕЕ (12| Я ии) Ха] = E[E(In 12| ик] 
= ЕЙ. | Х,] = Р N |Х„) = РОХ,). (9) 
这 样 , 对 形 如 J= D +I ИЖЕ дн 其 中 < Кү 和 
J? evCXntkti), 已 经 证 明了 性 质 (9). 由 此 可 见 (练习 题 la), 性 质 (9) 对 于 任意 集合 
лє һун 成 立 . 因而 (练习 题 1b), 性 质 (9) 对 于 任意 集合 J e Оа 
代数 也 成 立 . 于 是 , 由 此 同样 地 可 见 (练习 题 lc), 性 质 (9) 对 于 o- 代数 


оо 
х х 
Е (0 Уыз) = F оо), 
k=l 


也 成 立 . 口 

注 这 一 证 明 的 论据 是 适当 集合 原理 的 应 用 (首先 对 于 “简单 ”构造 的 集合 进 
行 证 明 ), 然后 利用 单调 类 的 结果 (第 二 章 50). 以 后 , 这 一 证 明 方法 还 将 不 止 一 次 地 
使 用 (例如 , 见 定理 2 和 定理 3 的 证 明 , 特别 由 这 些 定理 的 证 明 , 可 以 得 到 以 上 定理 
1 的 证 明 中 , 引用 练习 题 1a, 1b, 1с 的 地 方 ). 

а. 随机 游 动 ”马尔 可 夫 链 的 经 典 例子 是 随机 游 动 X = (Xn)n>o, 其 中 

Xn=Xo+Sn, п>1, (10) 

而 Sn = & + + En 且 定 义 在 概率 空间 (9,. 多 ,P) 上 的 随机 变量 Xo,61,é2,… 相 
互 独立 . 

定理 2 БАРО = 0(Хо), 9 = о(Хо, а, En) n > 1; № (9,9 (Я n)n>0, 
Р) 是 过 滤 概率 空间 , 且 所 研究 的 序列 X = (Xn)n>0 是 该 空间 上 的 (广义 及 狭义 ) 5 
RTRA: 对 于 任意 n>0 Ве. (В), 


P(Xnti Е BIF „)(ш) = P(Xn+1 Е BIXn(w)) (Р —а.с.), (11) 
并 且 
Р(Хһ+ Е BIXn(w)) = Р„+1(В — Xn(w)) (Р —а.с.), (12) 
其 中 
Рь+1(А) = P{énti Е А}, (13) 
而 


B — Хь(ш) = {y :y + Хь(ш)є B}, BEDR). 
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证 明 我 们 同时 证 明 (11) АЖ (12) 式 . 对 于 离散 型 概率 空间 的 情形 , 在 第 一 章 
$12 中 曾经 作 过 类 似 的 证 明 . 初 看 来 , 似乎 这 里 的 证 明 也 同样 简单 .然而 实际 上 , 我 
们 通过 所 作证 明 仍然 可 以 体会 到 “什么 是 证 明 ”. 

考虑 集合 АЕ {Xo € Во, & € B1,… ,én € Bn}, 其 中 В, € (R), i =0,1,:… ‚п. 
根据 条 件 概率 P(Xn Є BIF „)(ш) 的 定义 ( 见 第 二 章 87) 


[| Po є BIF Po) = Ј renen Ps) 
= Р{Хо Е Во, & Е Bi, ,én Е Bn, Xnt+1 € B} 


=] Pui(B— [то + ту +++- +2.) Рога): Paldan) 
Box ByXX В» 
= 人 Pani (B — Х„(ш))Р(4»). (14) 
这 样 , 对 于 Sn 中 形 如 A = {Хо € Во, & Е B1,… ,én Е Ba} 的 集合 , 有 
Ј Р є вія nP) = Ј Рв – хура. 09) 
А А 


显然 , 上面 的 集合 4 的 集 系 £n E r- Ж (О EAn ВЖ А Е 6 М Ar Е в, 
Й д, ПА Е 8; 见 第 二 章 82 定义 2). 其 次 , 以 多 表示 一 切 使 (15) 式 成 立 的 集 
в 4e Fn 的 全 体 . 

现在 证 明 多 是 和 - Ж ( 见 第 二 章 82 定义 2). 显然 Qe 多 , 即 满足 上 述 定义 的 
性 质 (Aa). 由 于 勒 贝 格 积分 的 可 加 性 , 由 上 述 定义 也 可 得 性 质 (As). 由 于 勒 贝 格 积分 
的 单调 收敛 定理 ( 见 第 二 章 86), HA- 系 的 定义 可 以 得 到 第 三 条 性 质 (和 。). 

从 而 , 多 Ел К. 运用 第 二 章 82 定理 2 的 命题 с), TE obn) С. 注意 
到 0(.6„) = Я n, 从 而 性 质 (15) 对 于 4 e Fn 集合 也 成 立 . 

这 样 , 注意 到 Р, (В - Х„(ш)) 作为 w 的 函数 – 可 测 (练习 题 2), 故 (根据 
条 件 概率 的 定义 ) 由 (15), 可 见 P41(B — Xn(w)) 是 条 件 概率 P(Xn+1 Є BIFn)(w) 
的 变 式 ， 最 后 ,由 条 件数 学 期 望 的 “ 望 远 性 ”性 质 ( 见 第 二 章 87 ER H) 可 见 ， 
(P - ac.) 有 


P(Xn+1 Є В|Х„)(ш) = Е[{х„,,єву!Хл](ш) = Е{Е[(({х„,,єву!#)|Х]}(ш) 
= ЕР.+1(В — Xn)|Xn(w)] = Раза (В — Х„(ш)). (16) 


于 是 , 两 条 性 质 (11) 和 (12) 得 证 . o 

Ж 性 质 (11) 和 (12) 的 正确 性 , 或 许 也 可 以 直接 由 第 二 章 82 引 理 3 推出 (Ж 
习题 3). 我 们 对 这 些 “几乎 显然 ” 的 性 质 作 了 详细 的 证 明 , 在 一 定 意义 上 是 为 了 演示 
类 似 命题 的 证 明 技术 , 证 明基 于 适当 集合 原理 以 及 单调 类 的 有 关 结 果 . 
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5. 广义 马尔 可 夫 性 ”考虑 马尔 可 夫 性 (1). ШЖ (Е,&) 是 博 雷 尔 空间 , 则 由 第 
二 章 87 定理 5 可 见 , 对 于 每 一 个 > 0, 存在 正则 条 件 分 布 PHi(z;B), № (Р —а.с.) 
有 


P(Xnti Є BIXn(w)) = Pari(Xn(w); В), (17) 


其 中 Pailt: В), BEg,zre 巨 ,具有 如 下 性 质 ( 见 第 二 章 87 定义 7): 

(а) 对 于 每 一 个 r, ЖЖ Р„1(Х„;.) 是 空间 (Е,#) 上 的 测度 ; 

(b) 对 于 每 一 个 ВЕ, 函数 Parli В) Я E- TA. 

函数 已 = 已 (z; В), п > 1, 称 做 转移 函数 ( 亦 称 马尔 可 夫 核 ). 

特别 重要 的 是 下 面 的 情形 : 这 些 转移 函数 全 相等 Р, = Р, = …, 确切 地 说 , 对 这 
些 条 件 概 率 P(Xn+1 Є BIXn(w)), n > 0, 存在 同一 个 正则 条 件 分 布 的 变 式 P(z; В), 
使 (P -- ac.) 对 于 一 切 n>0,Be 儿 ,有 


Р(Х, Є BIXn(w)) = P(Xn(w); B), (18) 


如 果 变 式 Р = P(z; В) 存在 (那么 可 以 认为 对 于 一 切 n > 0, Р, = Р), 则 马尔 可 
夫 链 称 做 (对 时 间 ) 齐 次 的 , 其 转移 函数 为 Plz; В), тє E,B eg. 

马尔 可 夫 链 的 齐 次 性 直观 意义 很 明显 : 相应 系统 的 运动 在 如 下 意义 上 均匀 地 进 
行 , 控制 系统 变化 的 概率 机 制 在 所 有 时 间 n > 0 都 保持 不 变 (在 动态 系统 理论 中 , 这 
种 性 质 等 同 于 保守 性 ). 

除 转移 概率 P, Pa 之 外 , 而 对 于 齐 次 马尔 可 夫 链 , 除 转移 概率 P 之 外 , 马尔 
可 夫 链 的 重要 特征 是 初始 分 布 r = rB), B Eg , 即 由 等 式 r(B) = Р{Х € В}, ВЕ 
E, 所 决定 的 概率 分 布 . 

数组 (м, Pi, Pa) 完全 决定 序列 X = (Xn)n>o 的 概率 性 质 , 因为 该 序列 的 一 
切 有 限 维 分 布 决定 于 如 下 公式 : 


P{XoeB}=r(B)，Beg， 
РЕЖ n >1Ж Ве.(Е"+1) (= #"+! =& ®-.-®&(п+1) 次 ), 有 


P{(Xo, X1,... , Xn) € В} 
= 人 p PEO ‚›тһ)т(4атө)Р\(то,&х)--- Рь(ти-1, d£n). (19) 


事实 上 , 首先 考虑 形 如 В = Bo x … x В, 的 集合 В. ЖА, 当 n = 1 时 , 由 全 概 


> 244 . ЖЛЕ ”形成 马尔 可 夫 链 的 随机 变量 序列 





率 公式 ( 见 第 二 章 87(5) 式 ) 
P{Xo € Bo, Xi € B1} 

= | wens tPA: є BilXo(o)P(de) 
= | en РВ Xole) Pld) 
Е 1, In, (го) Ри (Ви; то) (бло) 
= 人 和 asxmleoizDPazazojrtdzo， 

下 面 用 归纳 法 证 明 : 

Р{Хо € Bo, Хи € Bi,- ,Xn € Bn} 
= | поквь клев, РЖ» є Bal Xol), „Ха РК) 


= | Hixvenn x-ren- РОХА € BalXn-i (P(w) 


= [lie ео ох, лев, РА (Bni Xni) P(A) 


=f TBuxBix…xB。i(zoTL ,Tn-1) 
Exx E 
хР, (Вы; тп-1)Р {Хо Е dr ,Xn-1 Е dEn} 
= [Box Bixx Bn-1x Bn (205115777 5-1,2) 


Exx E 
Xx Pa (d£n; Tn-1)Pn-1(dEn-1; Tn-2) + Pi(dz1; то)т(йто). 


这 样 , 在 集合 B 为 В = Bo x … x В, ЖЕТ, 所 得 结果 恰好 为 (19) R. 对 于 集合 
B e #(Е"+!) 的 一 般 情 形 , 可 以 用 与 定理 2 证 明 中 类 似 地 方 的 方法 实现 . 

基于 单调 类 的 结果 ( 见 第 二 章 82), 由 性 质 (19) 可 以 导出 (练习 题 4), 对 于 任意 
HR . 罗 (EB"+1) 一 可 测 函 数 h = һ(то,т1,---,л„), 有 


EA(Xo, Ху, ,Х„) 
= Јаз ва) А (бело) Руна). 00) 


6. 数组 (т, Pi, Pao) 决定 的 马尔 可 夫 链 ”对 于 (广义 或 狭义 ) 马尔 可 夫 链 ， 
利用 (19) R, 根据 其 初始 分 布 = r(B), 其 中 r(B) = Р{Хо € B},B є ®, И 
及 转移 概率 Pu(z,B),n > l,z € E,B Е 多 ,就 可 以 完整 地 建立 任意 随机 变量 组 
Xi, Xa ,Xn(n > 1) 的 分 布 律 Law(Xo,X1,… Xn). 

我 们 现在 以 完全 给 定 的 数组 (п, Pi, Р,,...) 为 基础 , 调换 关于 马尔 可 夫 链 的 定义 
全 部 观点 . 从 数组 (7, Pi, Pa) 出 发 , 把 其 中 r 的 概率 意义 理解 为 系统 初始 状态 的 
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概率 分 布 , 而 把 满足 第 5 小 节 中 定义 的 性 质 (a) 和 (b) HEAR, Pari = Рац, В), 
п > 0, 当 作 转 移 概率 , 即 系统 在 时 间 п 处 于 状态 т, 在 时 间 п+1 处 于 集合 Be 多 
的 概率 . 自然 , 假如 给 定 的 是 数组 (7, Pi, Pa), 就 产生 一 个 问题 : 它 一 般 是 否 对 应 
着 某 一 马尔 可 夫 链 , 而 且 以 给 定 的 r 为 其 初始 分 布 , 以 给 定 的 函数 Pi Po 为 其 
转移 概率 ? 

对 这 一 问题 的 答案 是 “正确 ". 实际 上 , 至 少 对 于 的 Е = R 情形 ( 见 第 二 章 89 
的 定理 1 及 其 系 3), 答案 包含 在 柯 尔 莫 戈 洛 夫 定理 中 ; 对 于 任意 可 测 空间 (Е,&) 的 
情形 . URE I 图 尔 恰 (L Tukea) 定理 中 ( 见 第 二 章 89 的 定理 2). 

按照 这 些 定理 证 明 , 我 们 首先 定义 可 测 空间 (Q, F): 设 (0.77) = (E”, B(E”)), 
其 中 E” = ExEx.…,. 罗 (E”) =Я 5 ®...; 换 句 话说 ,把 “点 ”w= (zo,z1,…) 
视 为 基本 事件 , 其 中 ri e Е. 

Я Я, = o(zo,zl……，,zn), 定义 流 (Я „)„›о. 我 们 以 “ 典 则 ”方式 定义 Xn(w) = 
zn 的 值 : 若 w = (zo,zl…), WE Х„(ш) = та. 

I 图 尔 恰 定 理 : 对 于 任意 可 测 空间 (Е,#) (其 中 也 包括 所 考虑 的 相 空间 ), 在 
(0,2) 上 存在 概率 测度 P+ ,使 


Pr{Xo eB}=7(B), Beg, (21) 
而 对 于 一 切 m > 1, 其 有 限 维 分 布 为 
Р„{(Хо, X1,- , Xn) Е В} 


= мало) | Розе). f aleo va)PGn-adz (29) 


定理 3 关于 (在 I 图 尔 恰 定 理 中 ) 引进 的 测度 Pr, 典 则 给 定 的 随机 变量 序列 
X = (Xn)n>o (在 定义 2 HELL) 是 马尔 可 夫 序 列 . 
证 明 需要 证 明 对 于 nm > 0,B eg, (Р. - a.c.) 有 


Pr(Xnti Е BIF „)(ш) = Р(Х, Є BIXn(w)), (23) 
МН, 这 时 对 于 n>0,(P - a.c.) 有 
P(Xnt1 Є BIXn(w)) = Pn(Xn(w); В). (24) 


仍然 利用 适当 集合 原理 和 单调 类 的 结果 (第 二 章 82) 进行 证 明 . 
像 前 面 的 作法 一 样 , 作为 适当 集合 , 考虑 “简单 ”构造 的 集合 4 < Fn 其 中 4 
具有 如 下 形式 : 
А = {w : Хо(ш) Е Bo……,Xn(w)eBn}， 


而 Bi &,1=0,1,... ,n, #8 ВЕ. 
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那么 , 由 于 测度 P 的 构造 ( 见 (22) 式 ), 有 


[Tixen Pe) = Р(Х є Bori: ,Xn є В.Х € В} 


= 上 КУА Рашат) |. Рабы) | Рале) 
= ji Р(Х, (w); ВР (dw). (25) 
现在 通过 像 定理 2 的 证 明 类 似 的 讨论 (对 于 集合 4 < Fn, 见 性 质 (15) 的 证 
明 ), 可 见 这 里 性 质 (25) 对 于 集合 де, 成 立 , 即 对 于 形 如 4 = (о: (Xol), 
Xn(w)) Е С} 的 集合 AEF n RL, 其 中 С e . 罗 (En+1). 
由 于 条 件 概率 的 定义 (第 二 章 т), 可 见 


] Цхьлєву(ш)Рх(дш) = f Р; (Хи € BIF n)(w)Px (dw), (26) 
A A 

ТАЖ Р, +1 (2 (5); В) 为 Я„- 可 测 , 故 由 (25) 式 和 条 件数 学 期 望 的 “ 望 远 " 性 
Ж ( 见 第 二 章 87 第 4 小 节 性 质 H) 可 见 , 关系 式 (23) 和 (24) 成 立 . о 


т. 马尔 可 夫 链 ( 族 ) 上 一 节 证 明了 , 与 每 一 个 给 定 的 数组 (7, Pi, Pa), 有 一 
个 马尔 可 夫 链 与 之 相 联系 (为 了 直观 , 记 作 Х” = (Xn, Pr)n>0), 并 且 以 т 为 其 初始 
分 布 , 而 以 РР»... 为 其 转移 概率 ( 即 满足 性 质 (21), (23) 和 (24) 的 链 ). 

在 初始 时 间 п = 0, 根据 分 布 т 随机 地 “抽签 决定 ”初始 状态 的 值 . 例如 , 结果 
Хо 的 值 等 于 т, 则 系统 在 下 一 时 间 按照 分 布 P.(; x), 系统 自 该 状态 转移 到 某 个 状态 
ту, 等 等 . 

这 样 , 初始 分 布 + 的 作用 仅仅 表现 在 时 间 п = 0, 而 后 系统 的 发 展 就 决定 于 转移 
概率 Pio Pa 因此 , 假如 对 于 两 个 初始 分 布 r 和 ло, 相应 “抽签 ” 的 结果 为 同一 状 
态 т, 那么 系统 的 发 展 (在 概率 意义 上 ) 将 是 一 样 的 , 都 仅 决定 于 转移 概率 P, Po 
亦 可 将 这 一 情况 表示 如 下 . 

{ЛЬ (EE) 表示 相 空间 . 假设 以 Pe 表示 对 应 于 如 下 情况 的 分 布 Pr Я т 
集中 在 点 x, 而 r(dy) = 6, (99), 即 т({т}) = 1, 其 中 {т} 是 属于 o- 代数 名 的 单 点 
集 . 

那么 , 由 性 质 (22) TA (练习 题 4), 对 于 每 一 个 4e BES) Я ге Е, (对 于 每 
一 个 л) 概率 P(A) 是 条 件 概率 Р, (А|Хо = т) 的 变 式 , Р, - a.c. 有 


Р,(А|Хо = 2) = Р.(А). (27) 


对 于 每 一 个 re Е, 概率 Pal) ЖӘНЕ ТИИИШ (Pi, Po) 组 . 
于 是 , 假如 基本 着 眼 点 是 系统 对 转移 概率 (Ру, Po) 的 依赖 关系 , 则 只 需 利用 
概率 P。(.),z є E, 而 且 如 果 需 要 得 到 概率 P*(.), 则 只 需 进行 简单 的 积分 运算 : 


Р„(А) = j; P-(4)r(dz)， 4e .多 (Eee). (28) 
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这 些 思路 导致 如 下 情形 :“ 马 尔 可 夫 过 程 的 一 般 理论 ”中 (I [21]), 对 于 这 里 研 
究 的 离散 时 间 的 情形 , 认为 基本 研究 对 象 并 不 是 哪个 具体 的 马尔 可 夫 链 , 而 是 马尔 可 
夫 链 族 X? = (Xn,Pz)n>0,z € Е. (不 过 , 通常 不 提 “ 马 尔 可 夫 链 族 ”, 仍然 简称 “马尔 
TRE, 并 且 通 常 使 用 记号 “ X = (Х,,Я„.Р.)”, 而 不 是 “X? = (X,,Pz)nz0,T E€ 
Е".) 

需要 强调 , 这 些 论述 都 假设 , 是 用 “ 典 则 ”方法 建立 的 链 : В (ESE) F), 
Ep g = ё#®#... WE w = (zo,z1,…), 则 一 切 随机 变量 Х„(ш) 定义 为 
Xn(w) = zn. 这 样 , 在 XT = (Xn Pa) 中 只 有 Ps 依赖 于 т, 而 不 假设 X 本 身 的 值 
对 г 的 任何 特别 的 依赖 条 件 , 在 这 种 情况 下 , 按 测 度 Ps 轨道 (zn)n>o 自动 从 点 £ 
“开始 ", 即 P,{Xo = z} = 1. 

в. 柯 尔 莫 戈 洛 夫 - 查 普 曼 方 程 (任意 状态 空间 ) 对 于 有 限 马尔 可 夫 链 的 情形 
(第 一 章 12), 主要 注意 力 放 在 , 利用 转移 概率 p= РОХ, = Хо = i) 的 研究 , 分 析 
这 种 链 的 行为 和 性 质 方面 , 证 明了 p 满足 柯 尔 莫 戈 洛 夫 - ФАРЗ (D. С. Chapman) 
方程 ( 见 第 一 章 $12 的 (13) 式 ), 并 且 由 此 同样 的 可 以 得 到 柯 尔 莫 戈 洛 夫 前 向 方程 和 
后 向 方程 (第 一 章 $12 的 (15) 和 (16) А). 

我 们 现在 讨论 , 在 具有 任意 相 空 间 (Е,&) 的 情形 下 , 柯 尔 莫 戈 洛 夫 - ENEY 
程 正确 性 的 问题 , 但 是 只 局 限于 齐 次 链 的 情形 , ШОР, = Р, =... = Р 的 情形 . 

在 这 种 情形 下 , 由 (22) 式 , 有 


Р„{(Хо, Ху, , Xn) € B} 
= аво) | Рена): | Тыш, sen) Penti den). 09) 
特别 , шй п = 2, АЈ 
Р, (Хо € Bo, X2 € Ba} = /, 小 P(z1; Вә)Р(то;4ту)л(дте). (зо) 
由 此 , 根据 拉 东 - 尼 科 巡 姆 定理 (第 二 章 86)， 以 及 条 件 概率 的 定义 ,(r - ac) 


有 
Р,{Х є ВХ ==} = | Реса )Ро Во) (31) 


现在 注意 到 , 由 于 (27) 式 , 可 见 
Р„{Х» € BolXo = z} = Pa{Xa € B2} (т-ас.), 


其 中 概率 P(X с B) 有 简单 的 含义 : 系统 由 在 时 间 п = 0 状态 т, 于 时 间 n= 2 
转移 到 状态 集合 В, 的 概率 , 即 经 两 步 转移 的 概率 . 

记 PO (z; Ba) = Pz{Xn є Bn} 是 经 nn 步 转移 的 概率 . 那么 , 由 于 所 考虑 的 链 的 
齐 性 , 有 Р(0(2; В) = P(z; Ву), 从 而 由 (31) <, 可 见 (r- ac.) 有 


РО (ив) = | Руан) Pa: В), (32) 
Е 
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其 中 Beg. 
类 似 地 可 以 证 明 (练习 题 5), 4 FEE n > 0, m > 0, (r- ас.) 有 


резаву = | PY (ady P™ (y; В). (83) 
Е 
该 式 就 是 著名 的 
柯 尔 莫 戈 洛 夫 - 查 普 曼 方 程 ， 


其 直观 含义 十 分 清楚 : 为 计算 系统 “ 自 点 тє EBT тъп 步 转移 到 集合 Be 多 中 
的 概率 PO (r; Ву, 需要 将 “ 自 点 z 经 过 n 步 转移 到 点 ye Е 的 ЕЯ KR 
ау 概率 ”Pt")(z; dy), 乘 以 “ 自 点 y 经 过 mm 步 转移 到 集合 B 的 概率 ”, 然后 对 可 能 的 
“中 间 点 ”y 积分 . 

柯 尔 莫 戈 洛 夫 - 查 普 曼 方程 (33), 把 不 同 转移 次 数 的 概率 相 联系 . 应 该 注意 , 该 
式 仅仅 是 精确 到 “ r- 几乎 处 处 ”成 立 .特别 , 由 此 可 见 , (33) 式 并 不 是 对 于 一 切 
ze Е 都 成 立 的 关系 式 . 不 应 当 觉 得 这 是 怪异 的 , 因为 我 们 在 前 面 不 止 一 次 地 处 理 
选择 条 件 概率 各 种 不 同 变 式 ( 异 说 ) 的 问题 . 一 般 不 能 指望 , 所 研究 的 性 质 “ 对 于 这 
些 变 式 (关于 т) 恒 成 立 ”, 而 事实 上 “仅仅 r- 几乎 必然 (处 处 ) 成 立 ”. 

然而 , 可 以 指出 这 样 一 些 变 式 , 使 柯 尔 莫 戈 洛 夫 - 查 普 曼 方程 (33) 已 经 对 于 一 
у zE E ЖҮ. 

这 由 如 下 命题 ( 见 练习 题 6) 可 以 得 到 . 

设 “ 转 移 概率 ”Pt")(z; В) 定义 为 : 


PW(z; В) = Р(х; В), 


而 对 于 n> 1， 
P()(z; В) = / P(z;dy)P®-" (y; В). 
E 


ЖА, 

G) 对 每 一 个 给 定 的 r, P™ (z; В), п > 1, Æ E 上 的 正则 条 件 概率 ; 

Gi) Р®(т;В) 等 于 Р„{Х„ є В}, 从 而 Po)(z;B) ( т- ас) 是 条 件 概率 
Pr(Xn Е В|Хо = т) WER; 

(ш) 对 于 这 样 定义 的 函数 P™ (2; В), п > 1, 柯 尔 莫 戈 洛 夫 - 查 普 曼 方程 (33) 
对 于 一 切 ге Е 恒 成 立 . 

9. 练习 题 

1. 证 明 在 定理 1 的 证 明 中 提 到 的 问题 la, 1b, 1с 的 命题 ， 

2. 证 明 在 定理 2 中 的 函数 Pi1(B 一 Xn(w)) їо 是 Я „- 可 测 的 . 

3. 证 明 第 二 章 82 引 理 3 的 命题 中 性 质 (11) 和 (12). 

4. 证 明 性 质 (20) 和 (27). 
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5. 证 明 关系 式 (33). 
6. 证 明 第 8 小 节 中 的 命题 (i), (i), (їй). 
т. 问 由 马尔 可 夫 性 (3) 是 否 可 以 导出 如 下 性 质 : 


P(Xn+1 Е B|Xo € Во, Ху Е В,,-.-,ХьЕ Bn) = Р(Хи+1 Е BIXn Е Bn), 


其 中 Bo, Bi,… ,Bu 和 В 是 属于 多 的 集合 , 而 P{Xo € Bo Xi € B, Xn є 
Bj > 0. 


$2. 推广 马尔 可 夫 性 和 强 马尔 可 夫 性 


1. 推广 马尔 可 夫 性 ”这 一 节 主要 研究 齐 次 马尔 可 夫 链 族 X? = (Xn, 已 )n>o,zE 
Е, 而 链 是 “ 典 则 地 ”定义 在 坐标 空间 (0,9) = (Е%,&°°) 上 并 且 决定 于 转移 函数 
Р(х; В), тє Е, ВЕ. 
在 (Q,.F) 上 定义 推移 算 子 0% : 9 一 (对照 第 五 章 81), 对 状态 w = (20,21, ), 
设 
bn(w) = (Znyzn+l г"). 
шж H = Н(ш) 是 Я 可 测 函 数 , 则 以 Нов, 表示 由 等 式 
(H obn)(w) = 五 (bn(w)) (1) 
定义 的 函数 (Н о Ө„)(ш). 从 而 , WÈ w = (то, 1, ---) ЖН = H(zo,z1,…), 则 
(H o n)(£0,£1,: +) = H(zn, Ти, ). 


下 面 的 定理 实质 上 是 $1 中 的 (6) 应 用 于 现在 考虑 的 齐 次 马尔 可 夫 链 族 命题 的 
重新 表述 . 

定理 1 i X? = (Xn,Pz)n>0,7 © 已 是 由 转移 函数 P(ziB),T Е E,B € & 
生成 的 齐 次 马尔 可 夫 链 族 ， 假设 对 于 Ве Э(Е") $an > 0, 由 81 中 的 公式 
(22) 由 Р 决定 测度 Р, ВАЁ Р, (Хо. Xi, ,Xn) Е В}, 其 中 (dy) = ôa) (dy), 而 
Р = Р =. = Р. 

那么 , 对 于 任意 初始 分 布 r, п> 0 以 及 任意 有 界 (或 非 负 ) F- 可 测 函 数 
H = H(w), 有 如 下 的 推广 马尔 可 夫 性 @: 


Е„(Ноё„\# X) = Ex, wH (Р, –ас.). (2) 
Ж 虽然 所 使 用 记号 自身 “无 须 解释 ", 然而 我 们 还 是 指出 Е, 是 按 测 度 
P-O = | Р.Ол() 


全 这 时 将 要 介绍 的 广义 马尔 可 夫 性 (обобщённое марковскос свойство) 与 一 般 广义 马尔 可 夫 
性 有 所 不 同 , 因此 我 们 将 其 译 为 “推广 马尔 可 夫 性 ", 以 示 区 别 . — 译 者 
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求 平均 , 而 Ex „уН 应 该 按 如 下 的 方式 理解 : 求 数学 期 望 EH ( 即 按 测度 Ps Ж 
对 Н 平均 ), 而 然后 向 此 式 GUE w(z)) 中 z 的 位 置 “ 代 入 ”随机 变量 Хш), 即 
Ех, w) H = ОХ, (ш). (注意 , Е.Н Ж т 的 多 - 可 测 函 数 (练习 题 1), Ж ЕХ H 
是 随机 变量 , 即 FZ /2- 可 测 函 数 ). 定理 的 证 明 仍然 利用 适当 集合 与 函数 原理 , 然后 
运用 单调 类 的 结果 . 

为 证 明 性 质 (2), 我 们 需要 验证 对 属于 ЎА = o(zo,z1,… ,zn) 的 任意 集合 A, 
有 


Јен оор) = | Exo Pra), з) 
А А 
或 者 对 于 更 加 紧凑 的 形式 , 有 

E,(H o 0n; А) = В. (Ex, H; А), a) 


其 中 Е, (6; А) 表示 Е, (Ela) 适当 集合 与 函数 原理 ( 见 第 二 章 86 Ж 2 小 节 ). 
根据 适当 集合 原理 , 我 们 考虑 形 如 A = {w : Xo € Bo, Xn Є Bn}(Bi € 6) 
的 “简单 ” 构成 集合 А; 考虑 函数 Н = 五 (zo,z1,… ,zm)(m > 0) (更 确切 地 说 , ЙН 
是 FX- 可 测 函 数 ). ЖА, 性 质 (4) 有 如 下 形式 : 
Е, |Н(Х,, Xnt1 ‚Хит; А] = Ex[Ex, H(Xo, X1, Xm); А). (5) 
利用 81 中 的 表示 (22), 可 得 
Ex[H(Xn, Хиль, Хит); А] = ExlIA(Xo,.: , Xn)H(Xn,** ,Xntm)] 
=. Ta(zo…… ,En)H (En, ,ZnHm)r(dzo)P(zoidzl)…P(zn+m-1idzn+Hm) 


= {aro зан) (do) Рза) Pen-adam) 
x | Јн панн) Рааб) Plentm-tidentm) | 
z: 
=) Ja(zo… ,zmjr(dzojPlzoidzi)… Plan idzn) 
И 
x И H(z0, =- ,лы)Рә(йт, ‚вы 
ра 
= Е, Ех, Н(Хо, Xi, ,Xm); А], 


其 中 Р,(йгу,--- ,dzm) = P(zoidzi)P(zlidza)… P(&m-1; йт). 

这 样 , 对 形 如 A = {w : zo € Bo,… ,zn € Ba} 的 集合 А, 和 函数 H = 
Н(хо,11,::: тт), 性 质 (5) 得 证 . 集合 Ae FX 的 一 般 情 形 (对 于 固定 的 m) 的 证 
明 , 同 $1 中 定理 2 的 证 明 是 一 样 的 . 

只 剩 下 证 明 ， 已 证 明 的 性 质 对 于 一 切 多 (= 5°)- 可 测 有 界 函 数 H = 
五 (zo,z1,…) 也 仍然 成 立 . 
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为 证 明 这 一 事实 , 只 需 证 明 , 如 果 де у, 则 对 于 函数 
Er[H(Xn, Хаа, ); А] = Е„[Ех„Н(Хо, Хз, ---); А}, (6) 


性 质 (5) 成 立 . 

为 了 利用 适当 集合 与 函数 原理 (第 二 章 50), 以 Ж 表示 满足 性 质 (5) 的 一 切 有 
界 多 - НН = 及 (zo,z1,…) 的 全 体 . 

Я J 是 形 如 Im = {w : £o € Bo,… ,zm Є Bm} 的 集合 的 全 体 , 其 中 Bi e E,i = 
0,1,… ,m(m) 20. 显然 , 这 一 集 系 J 是 Я (E) 中 集合 的 r- Ж. 

现在 考虑 第 二 章 82 中 定理 3 的 条 件 . 

条 件 (h) 成 立 , 因为 当 4 є J 时 , 根据 上 面 已 证 明 的 结果 有 Ta e H (需要 
在 (5) 式 中 设 有 (zo,… ,zm) = Ta(Zo,… ,Zzm)). 由 勒 贝 格 积分 的 可 加 性 , 可 得 条 件 
(ha), 而 由 勒 贝 格 积分 中 的 单调 收敛 定理 , 可 以 得 到 现在 (ha). 

根据 上 述 定理 3( 第 二 章 82), Ж 包含 一 切 关于 o- 代数 c(J) 的 可 测 函 数 , 而 
根据 定义 o(J) 就 是 o- 代数 E = BES) ( 见 第 二 章 82 的 第 4 和 第 8 小 节 ). 

2. 强 马 尔 可 夫 性 的 另 一 种 推广 ”现在 考虑 马尔 可 夫 性 的 第 二 种 推广 , 即将 “时 
间 п” 换 成 “随机 时 间 + ”的 强 马 尔 可 夫 性 . (这 一 节 开 始 引进 的 所 有 前 提 条 件 保持 
ЖЖ, 例如 , (Q, F) = (Е®,8°),...) 

以 r = r(w) 表示 有 限 随机 变量 rw), 且 对 于 每 一 个 п > 0, 满足 


{wi:7T(w) =n}e FĂ. 


按照 第 七 章 81 引进 的 术语 ( 见 定义 3), 这 样 的 随机 变量 称 做 (有 限 ) 马尔 可 夫 时 间 
或 停止 时 间 . 
将 停 时 与 o 一 代数 流 (FX)n>o: 


#Х={Ає#*:А[\{т=п}є #у ЖР п> 0), 


HER, 其 中 FX = oUF X) 是 在 “随机 区 间 ”[0,7] 上 观测 到 的 事件 的 o 一 代数 . 
定理 2 ARRI 中 提出 的 全 部 条 件 成 立 , жт = T(w) 是 有 限 马 尔 可 夫 时 间 . 
那么 , 有 如 下 强 马尔 可 夫 性 : 


Е.(Н 00.12) =Ех,Н (Pr 一 ac (т) 


在 进行 证 明之 前 , 首先 关于 应 当 如 何 理解 Ех, Н Я Н о Ө, 作 一 些 说 明 . 

38 у(х) = Е.Н. (在 第 1 小 节 已 经 指出 , %(z) 是 多 可 测 函 数 .) В Ех, H 理解 为 
W(Xr) = (Xr(w)(w)) 的 值 . 关于 ( 吾 ob-)(w), 应 理解 为 (Ho07(w))(w) = Н(Ө,)(ш)). 

证 明 设 集合 4 e 多 -. 像 定 理 1 一 样 , 为 证 明 (т) R, 需要 证 明 


E, (H о6,;А) = Е„(Ех,Н; А). (8) 
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等 式 的 左 侧 为 


E:(Ho0,;A)= VE,(H oe0.:4N {т=п}) 
n=0 


= УЕ, (Нов; АГ{т = п}). (9) 
п=0 
由 (8) RWAN, 得 
в, (Вх, Н; А) = УЕ (Ех H; A N {7 =n}). (10) 
n=0 


事件 АС{т=п}є FÀ. 由 于 (4) R, (9) 式 和 (10) 式 的 右 侧 相等 , 可 见 强 马尔 可 夫 
性 (7) 得 证 . o 

Ж ЖЖ Н(то т, +) = Тл(то, т, hh) m А = {w : (£0,£1, +) Е B},B € 
多 ”= BE”), 则 由 (7) 式 得 强 马尔 可 夫 性 的 如 下 常用 形式 : 


Р,{ш:(Ху,Ху+а,--) Е BIXo, Xi, ,Xr} 
= Px, {(Хо, X1,.…)€ B} (Pr –а.с.). (11) 


注 1 ”如果 分 析 一 下 强 马尔 可 夫 性 (т) 式 的 证 明 , 就 会 注意 到 , 实际 上 有 如 下 
性 质 . 

设 对 于 任意 п > 0, 定义 在 Q = E” 上 的 实 函数 Н, = Hn(w) 为 F- 可 测 的 
(Я = 2°), 并 且 一 致 有 界 (ШШ |н, (о) < cm > 0,w є 0). ЖА, 对 于 每 一 个 有 限 马 
尔 可 夫 时 间 т = r(w)(r(w) < oo0,w є О), 有 如 下 形式 的 强 马尔 可 夫 性 : 


Е,(Н, 06,9) = Y(T, X+) (Р, а.с). (12) 


EP y(n, т) = Е.Н, 而 Н. о6, = (Нго6,) (2) = Н, „)(Ө,„)(ш)). 
#2 上 面 假设 = rw) 是 有 限 马尔 可 夫 时 间 ， 假 如 不 是 这 样 , 即 rw) < 
00,w E Q, ЖА (12) 式 应 当 改 为 如 下 形式 (练习 题 3): 
Ex(H;: 00,92) = џ(т,Х,) ({т<оо};Р„-а.с.). (13) 


换 句 话说 , 在 此 情形 下 , (12) RERA {7 < оо} ЕР, - а.с. RAE, 
3. 强 马尔 可 夫 性 的 例 “在 研究 重 对 数 定律 时 , 我 们 曾经 用 到 一 个 不 等 式 (第 四 
章 84 中 的 引 理 1; 亦 见 下 面 (14) R), 对 于 布朗 运动 В = (Вст, 等 式 
Pp{ тах В, >а} =2Р{|Вт| > a} 


O<t<T 


是 上 述 不 等 式 的 类 似 (Ж. [131] 的 第 Ш 章 ). 
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设 &1,&2,… 是 独立 同 分 布 随机 变量 序列 , 并 且 各 随机 变量 共同 的 分 布 (关于 0) 
对 称 . 记 Xo = z €R, Xm = Хо + (& ++ Em) m >1. 像 前 面 一 样 , 以 P 表示 序 
列 X = (Хт)тро, (Хо = =) 的 概率 分 布 . (假设 空间 О = {w}, 是 由 坐标 给 定 的 , 其 中 
w = (тол, +), 而 Xm(w) = тм.) 

由 (很 容易 更 改 的 ) 第 四 章 84 引 理 1 的 (9) R, 可 见 对 于 任意 a > 0, 有 

po{ max Xm> a} < 2Po{ Xn > a}. (14) 


о<т<п 
引进 马尔 可 夫 时 间 т = то), 设 

т(ш) =inf{0 < m < n : Xm(w) > а}. (15) 
(一 般 , В inf Ø = ос.) 我 们 现在 说 明 , 假如 允许 像 处 理 确定 性 变量 一 样 , 对 待 这 样 的 
(随机 ) 时 间 , 应 如 何 利用 所 引进 的 马尔 可 夫 时 间 , 或 许可 以 给 予 不 等 式 (14)“ 很 容易 

的 证 明 ”. (对 照 第 四 章 84 引 理 1 的 证 明 ) 易 见 

РХ, > а} = Po{(Xn — Хул) + Хола >а} 
> Po{Xn — Хул > 0, Xran > а} = Po{Xn — Хула > ОРО Хула > а} 


1 1 1 
> aPo{Xrn > а} = aPo{r < п} = aPo {нш Xn >а}, (16) 


其 中 我 们 利用 了 “仿佛 ' 几乎 显然 的 ”性 质 : 随机 变量 Xn- Хола 和 Xrn 相互 独 
立 . 当然 , 对 于 确定 性 时 间 7 这 是 对 的 ; 然而 , 对 于 随机 时 间 т, 一 般 说 来 这 是 不 对 的 
(练习 题 4). (于 是 , 这 里 的 “很 容易 的 证 明 ” 不 能 认为 是 适当 的 .) | 
我 们 现在 基于 强 马尔 可 夫 性 (13) 式 的 应 用 , 引进 不 等 式 (14) 的 真正 “正确 的 证 
вд”. 
由 于 {Xn >a} С {r < n}, ША 


Po{Xn > a} = Е (Цх,„>а};Т < n). (17) 
引进 函数 Hm = Hm(zo,z1,…), Ж 


1, #т<п, H тт >а, 


0， 其 他 . 
由 相应 的 定义 可 见 , 在 集合 {7 <n} Е, 有 


| 


1, #т„>а, 
о, Ж, 


因此 , 注意 到 (17) R, 由 于 {Xn >а} С {7 < п}, UR {т<п} ЕЯ, 可 得 


(Нго6,)(то, 21, -**) М (18) 


Po{Xn > а} = Eo(H, o0;;7 < п) = EolEo(H; 00,17 т< п. (19) 
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由 强 马尔 可 夫 性 (13), 在 集合 {т < оо} Е, 有 
Eo(H; 00,|F „) = Y(T, X+) (Ро ~ a.c). (20) 


根据 定义 vim, =) = ЕН. 而 对 于 т >а, 
Е.Н, РХ > a} > Р(Х нз) >3 
(由 于 随机 变量 &1, 5, … 的 分 布 的 对 称 性 , КАВ). 
FE, 在 集合 {7 < n} 上 


Eo(H; о@,\Ў +) > 3 (Po ас.) (21) 


由 此 以 及 由 (19), (20) 式 得 所 要 求证 明 的 不 等 式 (14). 

а. 柯 尔 莫 戈 洛 夫 -- 查 普 曼 方 程 ” 如 果 考 虑 柯 尔 莫 戈 洛 夫 - 查 普 曼 方程 (13) 和 
方程 (38) (第 一 章 812), 则 可 以 注意 到 它们 非常 相似 . 自然 应 分 析 它 们 的 表述 与 它们 
的 结论 中 的 共同 点 和 差异 . (我 们 仅 限于 讨论 具有 离散 状态 集合 Е 的 齐 次 马尔 可 夫 
BE.) 

对 于 n>1,1<k<n,i,j€ Е, (ЖЗ (1) АЖ! (2) R), 有 


рих, = 0 = DP = =a) + D BIA, = ОЪ = a) 


аєЕ 


= У BABI Xn = ЦЬ = oF = 三 Е{[1(Х = а)Е,(Х„-ь = 09} 


аєЕ аєЕ 
L у BAIX = а) Хак = j) ов} 
а ЕЕ 
2 УС BAIX = а)Ех(Х„-к = 0) 
аєЕ 
= 》 ЕНИХ» = а)Е ДХ, = j)} = У Eil(Xk = а)Е, (Х.к = j) 
аєЕ аєЕ 
= У РКХ» =a)Pa(Xn-k = 7), (22) 


оєЕ 


这 就 是 柯 尔 莫 戈 洛 夫 — 查 普 曼 方程 (13), 而 在 第 一 章 812 中 表示 为 


(п) _ (к) ко), 
ту = ую 
«ЕЕ 


假如 在 (22) 式 中 , 将 时 间 大 换 成 ( 取 1,2,… ,n 为 值 的 ) 马尔 可 夫 时 间 т, 并 且 
将 采用 马尔 可 夫 性 (2) 换 成 使 用 强 马尔 可 夫 性 (т), WE (练习 题 5) 柯 尔 莫 戈 洛 夫 - 
查 普 曼 方程 如 下 自然 的 形式 : 


РАХ, = j} = УРДАХ, =ajPa{Xn-r = 3). (23) 


аЕЕ 
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在 (22) RAE (23) 式 中 都 是 对 相 变 量 a e E 求 和 . 在 第 一 章 812 的 (38) 式 中 是 对 
时 间 变 量 求 和 . 

注意 到 上 述 情况 , 现在 假设 7 是 取 1,2,… ,n 为 值 的 马尔 可 夫 时 间 . 像 上 述 (38) 
式 一 样 , 我 们 开始 推导 下 面 的 式 子 , 有 


n 
Pi{Xn =j} = DPiA{Xn =j7=k}+PiA{Xn = jr >n+1} 
k=1 


Н 
= DEl(Xn = DI(r =) +Р{Х„ =)т2т+1} 
k=1 


= }`Е{Е[(Х„ = т = ©} +Р{Х = т >n} 
к=1 


= Уве = ЮВЕ» = А) +Р{Х„=}т>п+1} 
k=1 


= YEA = hEilI(Xn-k = j) 069 k} + Pi{Xn = т> пъ} 


k=1 


= TEA = kBiI(Xn_k = j)} +Р {Хь =j T> n+}. (24) 


k=1 
在 第 一 章 12 的 第 7 小 节 , 如 果 集合 {} = ©, 则 时 间 т = ту, 其 中 
ту = min{1 <k <n: Xr = j} 


满足 条 件 т, = п +1. 从 而 , 在 这 种 情形 下 , (24) 式 自然 可 以 简化 为 : 


Р{Х„ = = Е = ЮЕх, Хак = 0) 


к=1 


ЕЦ = ЮЕ; (Х.к = Ј)) 


5 it IM- 


Е: (т; = k)EjI(Xn-r = 7) 


6 {ту = Kk}Pj{Xn-k = j}, 
k=1 
成 为 第 一 章 812 的 (38) 式 
р ур (25) 


在 (24) 式 中 也 可 以 得 到 另 一 HABAR, 其 中 (与 柯 尔 莫 戈 洛 夫 - 查 普 曼 方程 
不 同 ) 是 对 时 间 变 量 求 和 . 例如 , 假设 马尔 可 夫 时 间 


т(а) = ши {1 < k < n : Xr = a(k)}, 
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以 及 (确定 性 ) 函数 a = a(k),1 < К< п, 而 马尔 可 夫 链 满足 条 件 : 对 于 给 定 的 i 和 
n,Pi{T(a) < п} = 1. WA, 由 (24) RTA 


Pi{Xn = j} = у Е,Ш(т(а) = ЮЕХ, „ЛХ, = 7)] 
&=1 


= У Ека) = ЮЕ (к (Ха-к = j), 
к=1 


Вр (对 照 (23) ©) 


РХ, = j} = УР) = k}Paw {Xnr =. 
к=1 

5. 练习 题 
1. 证 明 第 1 小 节 的 注 中 的 函数 Vle) = Е.Н 为 #- 可 测 . 
2. 证 明 性 质 (12). 
3. 证 明 性 质 (13). 
4. 问 第 3 小 节 的 例子 中 , 随机 变量 Xn Х.л 和 Xrn 是 否 独立 ? 
5. 证 明 性 质 (23). 


33. 马尔 可 夫 链 的 极限 、 遍 历 和 平稳 概率 分 布 问题 


1. 广义 马尔 可 夫 性 我们 在 81 中 已 经 指出 , 用 马尔 可 夫 链 描绘 的 无 后 效 随机 
系统 的 渐 近 性 质问 题 , 是 马尔 可 夫 过 程 理论 的 中 心 课题 之 一 . 这 在 一 定 程度 上 与 下 
面 的 情况 有 关 , 在 相当 广泛 的 条 件 下 , 这 样 的 系统 好 像 趋 向 于 “稳定 ", 进入 平稳 “ 状 
A”. 

可 以 从 不 同 的 角度 研究 齐 次 马尔 可 夫 链 X = (Xn)n>o 的 极限 性 质 . 例如 , 可 以 
像 狭义 平稳 序列 的 遍历 性 定理 那样 (第 五 章 83 定理 3), 对 不 同 函数 = f(z), 研究 
Ñ n — оо 时 形 如 пт! бт. f(Xm) ZB Pr- 几乎 必然 收敛 问题 . 像 第 一 章 那样 , 大 
数 定律 成 立 的 条 件 也 很 重要 . 

进一步 的 叙述 , 主要 的 注意 力 , 并 不 放 在 诸如 几乎 必然 收敛 或 依 概 率 收 化 上 , 而 
放 在 当 n 一 со п 步 转移 概率 Pm(z; А) 的 渐 近 性 质 的 问题 上 (Ж. $1 的 10 R), 
以 及 平稳 (RE) 测度 9 = (А) 存在 性 的 问题 上 , 其 中 测度 


(А) = | Редаг), @) 


其 中 P(z; А) 是 (一 步 ) 转移 函数 . 
需要 强调 , 在 (1) 式 定义 中 , 一 般 将 完全 没有 假定 测度 q= 9(4) 是 概率 测度 ( 没 
有 要 求 (Е) = 1). 
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假如 q = qA) 是 概率 测度 , 则 习惯 上 称 之 为 平稳 分 布 或 不 变 分 布 . 这 一 术语 的 
含义 是 完全 清楚 的 : 如 果 把 分 布 а 取 为 初始 分 布 r, 即 认为 Po{Xo € А} =4(А), W 
由 (1) АЯ, 对 于 任意 n >1,Р„{Х„ є А} = 4(А), 即 该 分 布 随时 间 是 不 变 的 . 

不 难 举 出 不 存在 平稳 分 布 4 = qA), 但 是 存在 平稳 测度 的 例子 . 

例 BEX = (Х„)„»о 是 由 伯 努 利 概 型 生成 的 马尔 可 夫 链 , 即 Xni = Xn Бла, 
EP &\,&,--- 是 独立 同 分 布 随机 变量 序列 : Р{&„ = +1} = р,Р{&, = -1} = 9. 设 
Xo = z, 其 中 тє {0, +1,...}. 显然 这 时 转移 函数 为 


Plz;{r+1})) =p, Р(т{т-1}) =. 


不 难 验证 , 对 于 任意 z {0,+1,...}, WE qr} = 1 测度 g(4), Ж (1) 式 的 解 
之 一 . 如 果 р # ч, 则 满足 4({т}) = (p/q)* 测度 (А) 是 第 二 不 变 测度 . 显然 , 这 些 测 
度 都 非 概率 测度 , 而 且 这 里 不 存在 概率 不 变 测度 . 

这 一 简单 的 例子 说 明 , 为 存在 平稳 (不 变 ) 分 布 , 需要 所 研究 的 马尔 可 夫 链 满足 
一 定 条 件 . 当 п 一 оо В, 关于 转移 概率 P™ (x; А) 的 极限 值 的 问题 之 所 以 重要 , 首 
先是 因为 不 依赖 于 初始 状态 т 的 极限 的 存在 问题 . 这 时 应 该 注意 到 完全 可 能 出 现任 
何 极限 分 布 都 不 存在 的 情形 . 例如 , 可 能 出 现 这 样 的 情形 : 对 于 任何 А с 多 和 任意 
初始 状态 ге EE,lim PW™(z; А) = 0. 例如 , 在 上 面 的 例子 中 只 需 设 p = 1, 即 考虑 确 
定性 的 向 右 运动 ( 亦 见 58 中 的 例 4 和 例 5; 对 照 85 的 练习 题 6). 

对 于 任意 相 空间 (Е,&) 的 情形 , 寻找 平稳 (不 变 ) 分 布 , 以 及 寻找 (具有 某 种 性 
质 的 ) 转移 概率 极限 值 的 分 布 , 是 相当 困难 的 课题 (例如 , 见 [104]). 然而 , 对 于 可 数 
状态 空间 (“可 数 马尔 可 夫 链 ") 的 情形 , 这 里 得 到 了 重要 的 和 相当 明显 表达 的 结果 . 
有 关 结 果 将 在 86 和 87 中 介绍 . 不 过 , 我 们 需要 首先 对 可 数 状态 马尔 可 夫 链 , 按 转移 
概率 的 代数 性 质 和 渐 近 性 质 , 进行 详细 的 分 类 . 

需要 指出 , 所 考虑 的 关于 平稳 分 布 和 极限 lim P™ (x; А) 的 存在 性 问题 , 二 者 密 
切 相关 . 事实 上 , ШЖ lim P™ (z; 4)(= v(4)) 存在 , 5 r 无 关 , MEA (对 于 Ає&) 是 
测度 , 则 由 柯 尔 莫 戈 洛 夫 - HESE 


Pet 有 = | P™ (esdy) Piy; A) 
当 n — oo 时 , 经 (形式 地 ) 极限 过 程 , 得 
"(= | Pi: Ау. 


于 是 ,v= (А) 是 平稳 (不 变 ) 测度 . 

2. 要 研究 的 主要 问题 ”以 下 到 处 假设 , 所 考虑 的 马尔 可 夫 链 X = (Xn)n>o, 在 
可 数 相 空间 Е = {1,2,…} БИН. 为 简便 计 , 我 们 将 用 plij є В) 表示 转移 函数 
PEH. (为 直观 计 , 求 游 动 “ 质 点 ") 从 状态 i 到 状态 j 的 转移 概率 记 为 pp. 

我 们 关心 的 主要 问题 涉及 如 下 条 件 的 说 明 : 


- 258 + 第 八 章 ”形成 马尔 可 夫 链 的 随机 变量 序列 





А. 对 于 一 切 je Е, 存在 不 依赖 于 初始 状态 ie Е 的 极限 
Tj = шару; 
В. 这 些 N = (mm, 72,…) 的 极限 值 是 概率 分 布 , 即 ту > 0, D m = 1; 
ЗЕЕ 
С.Х = (Xn)n>o 是 遍历 的 , 换 句 话说 , 极限 值 = (ту, то, 5) 满足 条 件 一 
切 ту > 0， 5, ту =l; 


р. + (不 变 ) 概率 分 布 Q = (q1,q2,…) 存在 并 且 唯 一 , 即 = (q1,g2,… ) 满 
ЖЖ а, > 0， 下 4 = 并 且 对 于 一 切 je E, 有 
jE 


g=} tipi. 
іЄЕ 

Ж 这 里 用 到 的 术语 “遍历 性 ”在 第 五 章 已 经 出 现 过 (遍历 性 作为 度量 的 可 递 
性 , 辛 钦 - 博 赫 纳 遍 历 性 定理 ). 从 字面 上 讲 , 这 些 词 的 含义 涉及 不 同 的 对 象 , 然而 它 
们 也 有 共同 点 , 就 是 它们 都 反映 , 在 时 间 参 数 趋向 无 穷 的 情况 下 , 各 种 概率 特征 的 极 
限 性 质 . 

3. 练习 题 

1. 列举 马尔 可 夫 链 的 例子 , 使 得 т, = Шар) 存在 , 并 且 : (а) 不 依赖 于 初始 状 
Ж ji (b) 依赖 于 初始 状态 j. 

2. 列举 遍历 链 和 非 遍 爵 链 的 例子 . 

3. 举 出 不 是 遍历 分 布 的 平稳 分 布 例子 . 


84. 马尔 可 夫 链 的 状态 按 转移 概率 矩阵 的 代数 性 质 分 类 
1. 转移 概率 矩阵 ”假设 所 考虑 的 马尔 可 夫 链 有 可 数 个 状态 集 = = {1,2,...}, 


而 其 转移 概率 为 pij,i,j Є Е. 以 P= (р) 表示 这 些 转移 概率 构成 的 矩阵 (Ж), 或 者 
用 展开 的 形式 将 Р 写成 


Ра рә Юз 


下 面 要 引进 的 马尔 可 夫 链 状态 的 分 类 , 完全 决定 于 转移 概率 矩阵 Р 及 其 n> 1 
К Р) 的 代数 性 质 . 
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转移 概率 矩阵 р 完全 决定 于 状态 到 状态 的 一 步 转移 . 而 由 于 马尔 可 夫 性 , 矩阵 
PO = (р!) 决定 п 步 的 转移 . 例如 , ЖЕЕ 


pe а) 
0 0 
和 与 其 相对 应 的 图 形 (第 一 章 510) 表明 , 它 所 决定 的 “质点 ”的 运动 是 这 样 的 :“ 质 


点 ”在 状态 0 和 1 上 游 动 : 经 一 步 以 概率 可 能 0 一 1 移动 (以 概率 1/2), 但 是 移动 
1 一 0 不 可 能 . 由 п 步 转移 概率 矩阵 


ро _ 2- 1_-2-n 
0 1 


可 见 对 于 任意 n > 1р0) = 0. 因此 , 移动 1 一 0 显然 不 可 能 , 可 见 无 论 经 过 任何 步 
移动 , 1 一 0 当然 也 不 可 能 . 


非 本 质 状 态 





图 36 


在 该 例 中 从 状态 0 进入 状态 1, 但 是 不 可 能 再 越 出 状态 1. 

由 图 36, 可 见 根据 该 图 很 容易 复原 转移 概率 矩阵 P. 由 此 图 的 形态 可 以 看 出 , 这 
里 有 三 个 状态 (图 的 左 半 部 分 ), 从 某 一 状态 越 出 后 , 就 再 也 不 能 返回 . 

从 按 该 图 形 游 动 “ 质 点 ”的 “将 来 ”的 性 质 看 , 这 三 个 状态 不 重要 ( 故 称 之 为 非 
本 质 状 态 ), 因为 , 从 这 样 的 状态 可 以 越 出 , 但 是 不 可 能 再 返回 . 

这 样 的 “ 非 本 质 ”状态 不 值得 研究 , 立即 可 以 去 掉 , 并 把 全 部 注意 力 放 在 剩 下 的 
“本 质 ” 状 态 的 分 类 上 . (可 以 用 转移 概率 性 质 的 语言 : pi7 e En > 1, 给 “本 质 " 
状态 和 “ 非 本 质 " 状态 的 描述 性 定义 以 确切 的 形式 , 练习 题 1.) 

” 2. 可 达 状 态 和 可 通 状态 “为 将 本 质 状态 或 这 样 的 状态 组 分 类 , 需要 用 到 如 下 概 
£. 

EX1 称 状态 j 为 由 状态 i 可 达 的 , 记 作 i 一 j, 如 果 存 在 n> 0, E р) > 0 
ЕЛ =1; # izj Ш ру =0). 

称 状态 i 和 j 为 互通 的 , Еі у, 如果 i 一 j 且 j 一 i, 即 状态 i 和 j 互 为 可 
ж. 

51381 Zä io (ЕГ) 是 (ВАЖЕ Р 的 马尔 可 夫 链 的 ) 
状态 的 等 价 关系 . 
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证 明 根据 等 价 关系 ; j 的 定义 , 需要 验证 其 自 反 性 (i 一 让 ,对称 性 (ME 
ioj Ш) = 1) Г (BIX io ој k, Wick) 

前 两 条 性 质 可 以 由 状态 的 互通 性 得 到 . Жор ня АЗУ 
程 , И) > 0, р > 0 时 ,由 

р" = Dp pi? Уру Ру; > 0, 
IEE 

可 见 ic k. 类 似 地 上 一 i. FE iok. o 

我 们 把 所 有 互通 状态 ijk lie jhje kk oic) 都 归 为 一 类 那么 , 所 
有 这 样 的 状态 类 或 者 重合 , 或 者 不 相交 .从 而 , 互通 性 关系 把 (ЖЖ) 状态 的 整个 集 
合 Е, 分 割 为 有 限 或 可 数 个 不 相交 集合 Ei, Ez- (E = E + E2 +). 

我 们 把 这 些 集合 Ei, E2,… 称 为 (本 质 连 通 ) 状态 的 不 可 约 类 . 所 有 状态 形成 一 
个 不 可 约 类 的 马尔 可 夫 链 称 做 不 可 约 的 . 

为 演示 上 面 引进 的 概念 , 我 们 考虑 马尔 可 夫 链 : 其 状态 空间 为 Е = {1,2, 3,4,5}， 
而 转移 概率 矩阵 为 


уз 23| о о о 


14 3410 о о 
К [е - 一 一 р, | 0 
Pm=|0 ò о 1 о |= — |. 
0 | P2 
о о |12 0 12 


0 о|о 1 0 


这 一 链 具 有 5 个 状态 的 图 有 如 下 形状 : 


23 1 1/2 
ОС 0м LOE 
12 1 


1 14 2 


显然 , 该 马尔 可 夫 链 有 两 个 不 可 约 的 状态 类 : E = {1,2} 和 E = {3,4,5}. 研究 
该 链 的 性 质 归结 为 , 研究 两 个 链 中 每 一 个 链 的 性 质 : 两 个 链 的 状态 空间 相应 为 Е, 和 
Е, 而 转移 概率 矩阵 分 别 等 于 Pl 和 Р). 
现在 考虑 任何 一 个 不 可 约 状态 类 Е. 作为 例子 , 假设 将 状态 类 描述 在 图 37 中 
注意 , 这 里 只 有 经 过 偶数 步 返回 每 一 个 状态 才 是 可 能 的 , 经 奇数 步 只 能 转移 到 相 邻 
状态 , 而 转移 概率 矩阵 具有 分 块 的 结构 : 
0 о |172 12 
1/2 1/2 
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图 37 周期 d = 2 的 马尔 可 夫 链 


由 此 可 见 状 态 类 Е = {1,2,3,4} 划分 为 两 个 子 类 Co = {1,2} 和 С, = {3,4}, В. 
有 具有 如 下 周期 性 : 质点 一 步 从 子 类 Co RH, 一 定 转移 到 子 类 Су, 而 由 С, 转移 到 Со. 

з. 按 周期 对 状态 分 类 ”上面 的 例子 表明 , 看 来 在 一 般 情形 下 , 也 可 以 进行 不 可 
约 状态 类 按 周 期 子 类 的 分 类 . 

为 此 需要 引进 某 些 概念 , 以 及 数论 中 的 一 个 结果 . 

定义 2 о = (ynyr) 是 某 一 非 负数 pn > 0(n > 1) 的 序列 ; М, 是 使 
pn > O(n > 1) 的 下 标 п 的 集合 , 并 且 当 yn = 0(n > 1) 时 , 设 М, = в, 而 设 
GCD(M。) = 0, 其 中 GCD(M。) 是 集合 М, ЕХАЛИ Жо. ЖА, 称 数 

а) = GCD{n > 1: pn > 0} 


为 序列 о 的 周期 . 

换 句 话说 , 称 序列 р 的 周期 为 dp), 如 果 由 pn > 0 可 见 п 被 d(w) 整除 ( 即 对 
FRA k > 1,n 应 具有 d(y)k 的 形式 ), W d(y) 在 一 切 具 有 该 性 质 ( 即 对 于 某 个 整 
数 ! > 1,n = dl) 的 数 中 是 最 大 的 . 

例如 , 假如 序列 p = (фа, pz,……) ЖА: 

о war>0， 若 n=4k,k=1,2,…， 
= | тАк, 


则 序列 ф 的 周期 为 d(p) = 4; 虽然 pu > 0( = 2,4,8), BÆ dlp) # 2. 

ЖУЗ 称 序列 p = (pl,92,…:) 为 非 周期 的 , 如 果 其 周期 d(Pp) = 1. 

下 面 在 根据 周期 性 对 状态 分 类 时 , 将 要 用 到 数论 中 的 如 下 初等 结果 . 

3182 ХМ 是 关于 加 法 运算 封闭 的 非 负 整数 的 集合 (М С Б), ЖЕ 
GCD(M) =1. ЖА, Я Ж— по, MAR п > no 都 属于 集合 М. 

把 序列 ф = (p1,p2,…), 取 为 序列 OPP) 或 (p99 ,p39，…),d 之 1 其 
中 了 是 马尔 可 夫 链 的 某 个 状态 , 而 马尔 可 夫 链 转移 概率 矩阵 为 P = (р), В р) 是 
ЖЕЕ P(n > 1) 的 元 素 , PO = р. (这 时 , WR d(j) 是 序列 oG op) 的 周期 ， 
则 称 状态 j 有 周期 4(j).) ЖА, 就 有 如 下 结果 . 

GGCD 是 “Greatest Common Divisor”( 最 大 公约 数 ) 的 缩写 . 一 译 者 
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定理 1 设 状 态 j 的 周期 d= а). 

如 果 d = 1, 则 存在 no = no(j,d), 使 对 所 有 п > no НВ р > 0. 

如 果 d > 1, МАЕ т = по( 4), 使 对 所 有 п > no 转移 概率 ph’ > 0. 

如 果 d 之 1 且 对 于 某 个 ie 巨 和 m>1,pl”) > 0, 则 存在 no = nlj, d, m), 使 对 
所 有 n> по 转移 概率 р > 0. 

现在 给 出 一 定理 , 它 说 明 不 可 约 类 的 状态 的 周期 , 具有 “单一 类 型 ”的 特性 . 

定理 2 ЖЕ. = {ij} ARAE Ф (14) 状态 的 某 一 不 可 约 类 . 

这 样 状态 类 的 一 切 状态 按 如 下 意义 是 “单一 类 型 的 "; 它们 有 同一 周期 ( 记 作 
4(Е.), 并 称 为 E. 类 的 周期 .) 

证 明 设 ij e E, WEE kA L {# р > 0 和 ph > 0. ПЕНА 


夫 - 查 普 曼 方程 р) = “э рр > pept >0, 


因此 k+l 应 被 状态 ie Е, 的 周 其 al) 整除 . 设 d(j) 是 状态 j є Е, 的 周期 , 由 于 
d(j) = GCD{n : р > 0}, TA п 应 该 被 d(j) 整除 , 而 因为 


+ к 1 
р" +0 > р 9р0 >0, 


Жл + к +1 被 d(i) 整除 ; HF К +1 被 整除 , 而 且 d(j) = GCDfn : ру) > 0}, 因而 
d(i) < 42). 

由 对 称 性 有 d(7) < dli), РЖ d(i) = 40). п 

а. 不 可 约 马尔 可 夫 链 ”假如 状态 集合 组 成 (互通 状态 的 ) ЖАНА Е, С В, В. 
а(Е.) = 1, 则 这 样 的 类 常 称 做 非 周期 状态 类 . 

现在 考虑 d(E,) > 1 的 情形 . 

在 这 样 的 类 内 , 由 状态 到 状态 的 转移 , 可 以 以 相当 出 奇 别致 的 方式 实现 (就 像 上 
面 讨论 过 的 、 周 期 为 dE.) = 2 的 马尔 可 夫 链 的 例子 一 样 ; 见 图 37). 然而 , 结果 表 
明 在 由 一 组 状态 向 另 一 组 状态 的 转移 中 , 具有 完全 的 “周期 性 (循环 性 )”. 

ЖЮЗ ЖЕ.(Е. СЕ) 是 周期 为 d= d(E,) > 1 的 不 可 约 状 态 类 . 

ЖА, 存在 称 为 循环 子 类 的 d 个 状态 组 Co, Ci,- ,Са-ЦКЕ. = Co + Сү + 
Сал), 其 特征 是 : ЕН п = р+Ка(р 二 0,1,… ,d 一 1l; 上 二 0,1,…),“ 质 点 ”将 处 于 
子 类 Cp P, 并 且 在 下 一 时 间 进 入 Ср, 然后 进入 Cp+2,… ,进入 Ca-1, 由 Ca-1 Ж 
入 Co 4. 

证 明 固定 某 个 状态 io e Е., 并 引进 如 下 子 类 : 














Oo ={j EE.: Жр >0, 则 n=kd, К=0,1,.--}, 
оне к. жс ИШ 则 n=kd+1,k=0,1,.…}, 


Сал = {jE E.: р” >0, MWn=kd+(d-1), Е=0,1,..-}- 
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显然 , Е. = Co + С, +... + Са-1. 现在 证 明 ,“ 质 点 ”从 子 类 到 子 类 的 运动 是 按 
定理 3 所 描述 的 方式 进行 的 ; 见 图 38. 





图 38 在 循环 子 类 中 的 运动 


事实 上 , 我 们 考虑 某 个 状态 i < С, 并 假设 对 于 状态 j є E. pij > 0, 则 证 明 必 
有 j є Ctp+btmod)， 

假设 n р) > 0， 那 么 , п 可 以 表示 为 = p+kd,p = 0,1,…,d 一 1 和 
k =0,1,---, Жп = р (mod), ЯД п+1 =р+1 (тод). 因此 pl > 0 (根据 周期 
的 定义 d = а(Е.)), H j E Clp+1j(mod), 而 这 正 是 要 求证 明 的 . 口 

需要 指出 , 由 以 上 的 讨论 可 见 , 转移 概率 矩阵 P 具有 分 块 结 构 : 





现在 假设 游 动 “ 质 点 ”的 运动 由 矩阵 Р 控制 ,“ 质 点 ” 自 子 类 Co 的 某 种 状态 开 
始 运动 . 那么 , (由 于 子 类 Co, C1,… ,Ca-1 的 定义 ) 此 “质点 ”在 n= pkd 中 的 每 
一 时 间 处 于 集合 Cr 中 . 

从 而 , 与 每 一 个 这 样 的 状态 集合 Cp 都 可 以 与 一 新 的 马尔 可 夫 链 相 联系 , 其 转 
移 概率 矩阵 为 (of? ),i,j є Cp 这 一 新 马尔 可 夫 链 是 不 可 约 的 和 非 周期 的 . 

于 是 , 由 上 述 ( 非 本 质 状态 和 本 质 状态 , 以 及 不 可 约 类 和 循环 子 类 ) 的 分 类 ( 见 
综合 图 39), 可 以 得 出 这 样 的 结论 : 

Жоруп 之 1,i,je EE, 是 决定 “马尔 可 夫 质 点 游 动 的 转移 概率 . 在 研究 上 述 转 
移 概率 的 极限 性 质 时 , 可 以 仅 局 限于 “ 相 空间 Е 本 身 是 唯一 不 可 约 非 周期 状态 类 ” 
情形 的 研究 . 
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在 此 假设 下 , 具有 这 样 相 空间 和 转移 概率 矩阵 Р 的 马尔 可 夫 链 X = (Xn)n>o Ж 
做 不 可 约 的 和 非 周期 的 . 





图 зо 马尔 可 夫 链 的 状态 按 转移 概率 以 ” 的 渐 近 性 分 类 


5. 练习 题 

1. 在 第 1 小 节 的 末尾 , 讨论 了 非 本 质 状态 和 本 质 状 态 的 描述 性 定义 , 试用 转移 
概率 pij E En > 1 的 术语 , 给 出 非 本 质 状态 和 本 质 状态 定义 的 确切 表述 . 

2. 设 P 是 不 可 约 的 有 限 马 尔 可 夫 链 的 转移 概率 矩阵 , В. P = р. 讨论 矩阵 下 的 
构造 . 

З. Ж PP 是 有 限 状态 马尔 可 夫 链 X = (Х„)„>о 的 转移 概率 矩阵 ; cl,c?,… 是 独 
立 同 分 布 非 负 整数 随机 变量 序列 , 并 且 与 X 独立 ; п = 0,mm = 01 +... +0,,т> 1. 

(а) 证 明 : 序列 Х = (Х„)„>о 是 马尔 可 夫 链 , 其 中 Х„ = Xn; 

(b) 求 马尔 可 夫 链 = (Х„)„>о 的 转移 概率 矩阵 Р; 

(с) 证 明 , 如 果 对 于 马尔 可 夫 链 X, 状态 i у 互通 , 则 对 于 马尔 可 夫 链 Х, 状 
态 i 和 j 也 互通 . 

4. 考虑 马尔 可 夫 链 : 其 状态 空间 为 = {0,1}, 而 转移 概率 矩阵 为 

‚-( Ы pa) 0<а<1, 0<8<1. 
1-8 В 

试 描绘 矩阵 РО) п > 2 的 构造 . 


85. 马尔 可 夫 链 的 状态 按 转移 概率 矩阵 的 渐 近 性 质 分 类 


1. 常 返 和 非常 返 状 态 的 概念 与 准则 设 X = (Xn)n>o 是 有 可 数 个 状态 集合 
Е = {1,2,...} 的 齐 次 马尔 可 夫 链 , 其 转移 概率 为 pi = Pi{2 = jhi jE Е. 
设 
JE =Р{Х„ =,Хь#11<К<п-1}, (1) 
TXF i # j, 
IP =Р{Х„=Хк#}),1<Е<п-1}. (2) 
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ША, у! 是 “质点 ”恰好 在 第 n 步 首 返 状态 i 的 概率 , 而 О 是 “质点 " 在 
=: ЖЕЕ, 恰好 在 第 n 步 首 达 状 态 j 的 概率 . 
假如 设 
oi(w) = inf{n > 1: Xn(w) = i}, (3) 
其 中 当 上 式 右 侧 大 括号 {}= © 时 оу(со) = оо, 则 概率 ДЖ у 亦 可 表示 为 下 
面 的 形式 : 





ЛР =Pio = п}, SE = Роу = п}. (4) 
对 于 ije Е, 引进 变量 
= (5) 
п=1 
由 (4) 式 可 见 
fij = Pifo; < оо}. (6) 


换 句 话说 , fi; 是 “质点 ” 自 状 态 i 出 发 开始 游 动 , 迟早 到 达 状 态 у 的 概率 . 
在 以 后 特别 重要 的 是 , “质点 ” 自 状态 i 出 发 开始 游 动 , 迟早 返回 状态 i 的 概率 
Га. 下 面 给 出 这 些 概率 的 定义 . 
定义 ШЖ = 1, 则 称 状态 ; 为 常 返 的 (循环 的 , 返回 的 [recurrent], 回归 的 
[persistent]). 
定义 WÈ fi; < 1, 则 称 状态 ;为 非常 返 的 ( 非 可 迁 的 , 非 返 回 的 , 非 回归 的 ). 
下 面 的 定理 给 出 了 常 返 性 和 非常 返 性 的 准则 . 
定理 1 а) 状态 iE 忆 的 常 返 性 等 价 于 如 下 两 条 性 质 中 的 任何 一 条 : 


Pi{Xn =i 对 于 无 限 多 个 n} =1 或 Ую = 























b) 状态 ie 已 的 非常 返 性 等 价 于 如 下 两 条 性 质 中 的 任何 一 条 : 
Pi{Xn =i 对 于 无 限 多 个 n} =0 或 Уи" < 


于 是 , 由 定理 1, 可见 
А PH о 3 Dr = (т) 


fi <1еРИХ, =i 对 于 无 限 多 个 n} = ве? <=. (8) 


Ж 注意 , 根据 第 二 章 $1 #1, 事件 {X = i 对 于 无 限 多 个 п}, 是 对 于 无 限 多 
个 nn 使 Xn(w) = i Мо 集合 的 . 如 果 这 时 А, = {w : Х„(ш) = i}, М ( 见 第 二 章 81 
#1). оо оо 
{Xn =i 对 于 无 限 多 个 = ) U 4- 


п=1 к=п 
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证 明 立即 可 以 指出 如 下 蕴涵 关系 : 


Ур! <o = РИХ, =i 对 于 无 限 多 个 n}=0， (9) 


因为 , 由 于 р =РИХ, = г}, 可 见 上 面 的 蕴含 关系 是 博 雷 尔 - 坎 泰利 引 理 1 的 推 


论 (第 二 章 810 命题 a)). 


现在 证 明 ， 
(10) 


fri=1% р! = оо 
由 齐 次 性 和 马尔 可 夫 性 , 可 见 对 于 任何 数组 G 


sik), (Xr+: Хана) = (Л) 
Gis jin). 


э) (л) 有 
Pi{(X1, ,Хк) = (人 

= Р(Х, Хк) = (i й) РЫ {(X1, ,Xn) = 

由 此 直接 得 (对 照 第 一 章 812 公式 (38) 和 第 一 章 82 公式 (25) 的 推导 ): 


п-1 
009 = РХ, =j} = Р #3, ,Хл-к-1 #0 Xn-k = Xn = j} 


+ яз Xn-k-1 # Xn-k = ЛРАХь = j} 


= Es юр Фе =» Ж -k) 


这 样 , 得 如 下 n(n > 1) 步 转移 概率 的 公式 : 


р? = у лем ый (1) 
k=l 
设 ij=i, 有 
ча p- S JO у дю < p9 
Za- iee- Ee Y 
= fü Ewon (+2 w). (12) 
п=0 п=1 
其 中 pl =1. 由 此 可 见 
Уи 
(13) 


Уи <œ fa = 


n=1 D 
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现在 设 и = oo, M 





SP- EE (n-k) иг k) куз рз, | РО, 
п= 1 


п=1 n=1k=1 


因而 
(т) 
м р 
љ= УЛО > УЛ 2 0—1, Моо. 
k=1 k=1 (D 
ii 
1=0 
从 而 
N 
Dp = оо ја =1. (14) 


п=1 


由 蕴含 关系 (13) 和 (14), НИНА: 
Уи <<, (15) 


Ге 
ури soe fu=1 (16) 


为 完成 定理 的 证 明 , 只 需 验证 下 面 的 互 蕴涵 关系 : 


fii<1 兮 Pi{Xn =i 对 于 无 限 多 个 n} = 0, (17) 
fi=1 侣 Pi{Xn =i 对 于 无 限 多 个 n}=1. (18) 


直观 上 , 这 些 性 质 是 很 清楚 的 . 例如 , ШЖ fi; = 1, 则 说 明 Pi{o; < оо} = 1, Вр 
“质点 ”迟早 要 返回 它 开 始 游 动 的 状态 i 但 这 是 根据 强 马 尔 可 夫 性 , 从 这 一 (随机 ) 
时 刻 起 , “质点 的 寿命 ”仿佛 重新 开始 . 假如 继续 观察 , 则 我 们 将 看 到 , 事件 {Xn = i} 
将 对 于 无 限 多 个 下 标 n 出 现 , 即 Pi{Xn = i 对 于 无 限 多 个 n} = 1. 

我 们 现在 对 性 质 (17) 和 (18) 进行 严格 证 明 . 

对 于 给 定 的 状态 Е Е, 考虑 回 返 状态 i 的 次 数 不 少 于 т 的 概率 am 我 们 证 明 
此 概率 等 于 am = (fii)™. 

事实 上 , WR m = 1, 则 / 由 定义 可 知 aa = Ја. 现在 假设 am-1 = (fu), 
WEH am = (fi)™. 
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由 强 马尔 可 夫 性 (I 82 的 (8) R), 并 注意 到 事件 {oi =k} E€ F o, 可见 
ат = РАЯ 加 状态 i 的 次 数 不 少 于 т} 
= Ур, {о = к ВЕ k 时 后 返回 状态 i 的 次 数 不 少 于 m 一 1} 


k=1 


I PHa = ЮР Х.л, Хона, PEDA т 一 1 个 值 等 于 iloi =k} 


k=1 


= Ур, {oi = К)Р ХІ, Хо, --- PEDA m 一 1 MAFF i} 
k=1 














„т 


= Дш"! = ЛЛ)" = ды". 


= 
由 此 得 


1, #ш=1, 
0, Ж =0. 


该 公式 表明 , ШЖ А = (А, 对 于 无 限 多 个 n} (= їпА„), 其 中 А, = {Xn = i}, 
则 对 于 概率 Pi(4), “0 - 1 律 ” 成 立 , 即 Pi(4) 只 有 0 和 1 两 个 可 能 值 . 注意 , 这 一 性 
质 不 能 直接 由 博 雷 尔 - 坎 泰 利 引 理 (第 二 章 $10) 直接 得 到 , 因为 事件 A(n > 1) 一 
般 不 独立 . 

НН (19) R, 以 及 性 质 : Pi(4) 只 有 0 和 1 两 个 可 能 值 , 可 得 所 要 证 明 的 (17) Ыы 

和 (18) 式 中 的 蕴涵 关系 . 
2. 非常 返 状态 ”由 定理 1 可 以 得 到 非常 返 状态 如 下 简单 而 重要 的 性 质 . 
定理 2 如果 状态 j 非常 返 , 则 对 于 任意 状态 iE Е, 


Pi{Xn = i 对 于 无 限 多 个 n} = lim (Ги) = { (19) 


ую! < оо, (20) 
azi 
因此 , 任意 状态 ie E, 
р 一 0，7m оо. (21) 


证 明 由 (11) 式 (其 中 й =1), 9 
Èp- ЭЭУ (n-k) Ra Уи 


ЭЗ 


其 中 我 们 注意 到 
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(55 是 质点 从 状态 i 出发, 迟早 到 达 状 态 j 的 概率 ). 
由 (20) 式 显然 得 (21) 式 . п 
3. 常 返 状态 ”现在 考虑 常 返 状态 . 以 首 返 某 状态 ie Е 的 平均 首 返 时 间 


m= fP <1 (Е) (22) 
п=1 


有 限 还 是 无 限 为 转移 , 每 一 个 常 返 状态 ie Е 分 为 两 种 类 型 : 正常 返 或 零 常 返 状态 . 
我 们 知道 , 根据 (1) R SO 表示 恰好 经 过 n 步 首 返 的 概率 . 
定义 3 如果 


иг! = (б) >0, (23) 


nzi 
则 称 状态 ie E 为 正常 返 的 , 而 如 果 


сс -1 
щ\= (È л”) =0, (24) 


azi 
则 称 状 态 ie E 为 零 常 返 的 . 

这 样 , 根据 定义 首 返 零 常 返 状态 , 平均 经 过 无 限时 间 出 现 . 平均 首 返 正 常 返 状 态 
的 时 间 是 有 限 的 . 

4. 马尔 可 夫 链 的 状态 按 转移 概率 矩阵 的 渐 近 性 质 分 类 下面 的 框图 直观 地 表 
示 , 马尔 可 夫 链 的 状态 , 根据 常 返 和 非常 返 , 正常 返 和 零 常 返 分 类 . 





图 40 马尔 可 夫 链 的 状态 按 概率 p 的 渐 近 性 质 分 类 


5. 常 返 和 非 周期 状态 下 转移 概率 矩阵 的 渐 近 性 质 
定理 3 设 马 尔 可 夫 链 的 状态 iE 互 是 常 返 的 和 非 周期 的 (d(j) = 1). 
那么 , РЕЖЕ, 有 
Р? > | п — оо. (25) 


此 外 , 如 果 状 态 i AAEH (io j), 即 状 态 i 和 了 属于 同一 不 可 约 类 , 则 


1 
юу) 6 =, поо. (26) 
ш 
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在 下 面 将 要 进行 的 证 明 中 , 本 质地 依赖 于 引 理 1 的 论点 , 而 该 论点 是 “离散 更 新 
理论 ”的 关键 结果 . 关于 定理 3 的 另外 一 个 , 基于 耦合 (coupling, 第 三 章 $8) 的 思想 、 
例如 参见 [104], [105]. 

引 理 1 (“离散 更 新 理论 ”的 基本 引 理 ) Жо = (pny) 是 非 负数 的 非 周 
期 (d(j) = 1) 序列 , 根据 该 序列 建立 一 对 应 于 如 下 递 推 规则 的 序列 二 (ш.и): 
uo = 1, 对 于 任意 n> 1， 





Un = P1Un-1 + P2Un-2 +++ Фи. (27) 


那么 , пе оо 


иһ > р, 
ос 
其 中 /= У пр. 
n=l 


关于 该 引 理 的 证 明 , 例如 参见 [69] (第 1 卷 , 第 УШ Ж, 10). 
定理 3 的 证 明 HER i=j. 证 明 


pp 一 i п — оо. (28) 
为 此 将 (11) R (对 于 i=j 的 情形 ) 写成 下 面 的 形式 : 
ор при +?” ++ ИРИ, (9) 
ЖФ p) =1, 并 且 显然 / =p). 如 果 设 
шщ = 00, к= Л, (30) 


则 (29) 式 有 如 下 形式 


Un = PlUun-1 十 P2Un-2 +++ Фи, 














此 恰好 是 引 理 1 的 递 推 公式 . 

假如 我 们 能 证 明 (定理 3 中 假设 的 条 件 ) 序列 Pp) 的 周期 等 于 1, 则 
序列 GOAD, o) 的 周期 dr(7) 等 于 1, 那么 所 要 证 明 的 (28) 式 的 结果 可 以 直接 
由 引 理 1 得 到 . 
而 这 又 是 下 面 ( 引 理 2 的 ) 一 般 命 题 的 推论 . 


引 理 2 ТЕЁ ЈЄЕ, 
GCD{n>1:p >0} =GCD{n >1:79 > 0}, (31) 


即 周期 dj(j) = 40). 
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证 明 设 
M={n:p >0} 和 Му = {n: fH >0}. 


由 于 Mj см, 可 见 
GCD(M) < вср(м;), 


BH а()) < dj(7). 

相反 的 不 等 式 由 如 下 概率 的 意义 р) 和 п > 1 可 以 得 到 . 

如 果 “ 质 点 ”从 状态 j 出 发 经 过 п 步 仍然 处 于 该 状态 (pW > 0), 则 说 明 其 
游 动 是 这 样 进行 的 : 首先 经 k № (Г > 0) 由 状态 j 首次 返回 j, 然后 经 ko Ж 
GEP > 0)... # k (19 > о) 由 状态 了 首次 返回 了 

因而 = ki + Ёз ++. № dj(j) 整除 kiko Ка, 故 也 整除 n. 由 于 40) 
是 被 п АЕ руу! > 0 的 数 中 最 大 者 , 可 见 d(j) 24/9. 

于 是 d(j) = 4/0). 顺便 指出 , 在 利用 公式 d(j) = GCD{n >1:руу/ > 0} 定义 状 
态 j 的 周期 d(j) 时 , 也 可 以 利用 公式 dG) = GCD{n > 1 : fip >0}. 引 理 2 得 证 . 

о 














完成 定理 3 的 证 明 1) (25) 式 的 证 明 (1779). 
将 (11) 式 表示 为 如 下 形式 : 
p= 
k=1 


HP pl) =0,1 <0. 
这 里 , HFH n— оо 时 


n 1 к 
Pp > ГР Н LPL 
可 见 根据 控制 收敛 定理 (第 二 章 36 定理 3) 
ие Ўро де оз 
к к=1 


由 (32) 和 (33) 式 得 
жар! = 25, в 
即 命题 (25) 得 证 . 
2) (26) 式 的 证 明 (i = j 的 情形 ). 假如 在 条 件 i 二 了 下 ( 即 状态 i 和 j 属于 同一 
互通 状态 的 不 可 约 类 ) 概率 fij = 1, 则 由 (34) 式 即 可 得 性 质 (26) R. 
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假设 状态 j 是 常 返 的 , 则 由 定理 1 的 命题 a), 有 РАХ, = j 对 于 无 限 多 个 
п} = 1. 因此 , 对 于 任意 т, 


т) = Pi({Xm = ГЬ =j 对 于 无 限 多 个 п) 
< DPj{Xm=i Хан А: Xn j, Xn = j} 
- У рур т) = р", (35) 
其 中 中 间 的 不 等 式 是 广义 马尔 可 夫 性 的 推论 ( 见 82 的 (2) <). 由 于 Е 是 互通 状态 
X, 可 见 存在 m, 使 p90 > 0. 因此 由 (35) АЕ Л; = 1. 口 

в. 状态 周期 任意 的 情形 ”对 于 感 兴趣 的 状态 j 的 周期 4 任意 (d= dl) > 0) 
的 情形 , 可 以 自然 地 表述 上 面 的 定理 3 的 类 似 . 看 下 面 的 定理 . 

定理 4 设 马 尔 可 夫 链 的 状态 j E 已 是 常 返 , 且 其 周期 的 d = Фу) > 1 而 
ic 已 也 是 马尔 可 夫 链 的 状态 j (有 可 能 与 状态 了 相同). 

а) 设 i 和 了 属于 同一 不 可 分 解 状态 类 СС Е, В C0,C1,… ,Ca-1 是 (循环 的 ) 
子 类 , 按 如 下 顺序 编号 : Е Coi e Ca 其 中 ae {0,1,...,4-1}, 而 在 此 子 类 中 的 运 
动 是 按 如 下 顺序 : Co 一 C1 一 … 一 Ca 一 … 一 Ca-1 一 Co. ЖА, X п оо 时 

пажа) d 
изе (36) 

b) 在 一 般 情 形 下 , 当 i 和 j 可 能 属于 不 同 的 不 可 约 状态 类 时 , Шоп — co 时 , 对 

于 任意 a=0,1……,d =-1， 


ріп) _, R geno, (37) 


证 明 首先 设 a=0, 即 i 和 j 可 能 属于 同一 不 可 约 状 态 类 C, 并 且 同 一 循环 子 
类 Co. 
考虑 转移 概率 pP, зе С, 并 根据 ру (按照 81 的 构造 ) 建立 新 的 马尔 可 夫 链 . 
对 于 新 链 , 状态 j 是 常 返 的 和 非 周期 的 . 新 链 的 状态 i 和 j 仍然 是 互通 的 (i < j). 
这 就 证 明了 定理 3 的 性 质 (26): 
(nd) _, 1 u d _4 


7 оо ку Т оо ка) а) кл и;' 
>; jj У fis 
k= k=1 





其 中 最 后 一 等 式 成 立 , 因为 , 对 于 一 切 不 能 被 4 整除 的 有 0 = 0, 并 且 根据 定义 . 


=. 
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现在 假设 , 对 于 a = 0,1,… ,7r(< d 一 2), (36) REE. 
根据 控制 收敛 定理 (第 二 章 86 定理 3), 


d+r+1 pret) 
i tE, 
了 


FE, 对 于 а=т+1(<4 – 1), 欲 证 明 的 (36) 式 得 证 . 从 而 , 根据 归纳 法 , 对 于 
—Яа=0,1,... ,d 一 1, (36) 式 得 证 . 
b) 对 于 任何 ij e Е, 下 面 的 公式 成 立 (A (11) R): 


па+ 
ин = Ух л: ptite- Ж) EE E RELAT S E 


kul 


根据 假设 状态 ; 的 周期 等 于 d. 因此 , R К-а 具有 形式 rd 时 之 外 , A putt = 0. 
于 是 , 有 Я 
рене á УУУ ОРУ 

由 此 以 及 上 面 证 明 的 (36) R, 仍然 运用 控制 收敛 定理 , 最 后 得 到 需要 证 明 的 公 
式 (37). 口 

т. 非 周期 马尔 可 夫 链 的 完全 分 类 RE 54 的 末尾 指出 的 那样 , 在 根据 转移 概 
率 的 渐 近 性 质 , 研究 马尔 可 夫 链 的 状态 的 分 类 时 , 只 需 局 限于 考虑 非 周期 不 可 约 链 . 

在 定理 1~3 中 陈述 的 结果 , 实际 上 包含 了 这 样 链 的 完全 分 类 的 全 部 必要 内 容 . 

首先 引进 一 个 辅助 命题 , 它 是 关于 不 可 约 链 的 所 有 状态 属于 同一 种 (“ 常 返 ” 或 
“非常 返 ") 类 型 . (对 照 84 定理 2 中 的 “单一 类 型 性 ”.) 

引 理 3 设 已 是 (互通 状态 的 ) 的 不 可 约 类 . 那么, 其 全 部 状态 或 者 都 是 常 返 
的 , 或 者 都 是 非常 返 的 . 

证 明 假设 链 至 少 有 一 个 非常 返 状态 , 例如 状态 i, 则 根据 定理 1, Бю < 

现在 假设 是 j 任意 另 一 个 状态 . 由 于 Е 互通 状态 (i j) 的 不 可 约 类， 存在 这 
样 的 状态 上 和 ,使 py) > 0 和 鸭 ) > 0. WA, 由 明显 的 不 等 式 


k+l k t 
pet +) > т] РР 


可 见 


У > рр “ б; Ую. 
п 


根据 假设 Ур) < оо, M k,l WE рр > 0, 从 而 р < оо. 

鉴于 定理 1 的 b), 由 此 可 见 , 状态 j 也 是 非常 返 状态 . 换 句 话说 , 假如 不 可 约 类 
只 要 有 一 个 非常 返 状态 , 则 其 余 状 态 也 都 是 非常 返 状态 . 

现在 设 i 是 常 返 状 态 , 我 们 证 明 其 余 状 态 也 都 是 常 返 状态 . 
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假设 ( 除 i 之 外 ) 至 少 有 一 个 非常 返 状 态 . 那么 根据 上 面 已 证 明 的 结果 , ЖАЗА 
态 也 都 是 非常 返 状态 . 因此 与 “i 是 常 返 状态 ” 的 假设 矛盾 . 
此 哪怕 有 一 个 常 返 状态 , 自动 导致 (不 可 约 链 的 ) 全 部 状态 都 是 常 返 状态 . 从 
而 引 理 得 证 о 

该 引 理 的 结论 , РЕВ) ТЯ РОГОВЕ, “ЖОНЕ A “非常 版 链 " 这 两 个 (被 
普遍 接受 的 ) 术语 是 合适 的 . (注意 , 这 里 说 的 “ 链 ", 而 不 仅 是 个 别 状态 J) 

定理 5 ”假设 马尔 可 夫 链 由 非 周期 状态 的 一 个 不 可 约 类 Е 构成 ， 对 于 这 样 的 
链 仅 属于 如 下 三 种 可 能 的 类 型 之 一 : 

O 非常 返 链 . 在 这 种 情形 下 , ATH ije E, 

















inoin) „ 
limp;j =0, 
并 且 在 


Ую; < 


的 意义 上 充分 “ 快 " 地 收 你 于 0. 
(1) 常 返 与 零 常 返 链 . 在 这 种 情形 下 , 对 于 一 切 让 Je Е, 


lim р = 0, 


Жнкй. 


Ув? = 


的 意义 上 充分 地 “ 慢 ", 此 外 从 j 到 j 的 平均 首 返 时 间 иу Ф оо. 
(ш) 常 返 与 正常 返 链 . 在 这 种 情形 下 , 对 于 一 切 i,j СЕ, 


lim р}! = А >0, 
ш 


其 中 万 是 从 j 到 了 的 平均 首 返 时 间 , ЖЕЖ. 

证 明 命题 (i) 在 定理 1 的 b) 和 定理 2 已 经 证 明 . 命题 (i) 和 (їн) 可 以 直接 由 
定理 1 的 a) 和 定理 3 得 到 . о 

в. 有 限 马尔 可 夫 链 ”现在 考虑 有 限 马 尔 可 夫 链 的 情形 , 即 状态 集合 Е 由 有 限 
个 元 素 组 成 的 情形 . 

结果 , 在 这 种 情形 下 , 定理 5 中 的 三 种 可 能 性 (i), (в), (ш) 只 有 (ii) 仍然 成 立 . 

定理 6 设 有 限 马 尔 可 夫 链 是 不 可 约 的 和 非 周 期 的 . 那么 , 这样 的 链 是 常 返 的 
和 正 的 . 这 时 

limpi? = ЕЗ > 0. 
ш 


95. 马尔 可 夫 链 的 状态 按 转移 概率 矩阵 的 渐 近 性 质 分 类 `215- 





证 明 用 反 证 法 ， 假 设 此 链 是 非常 返 的 ， 那么 ,如 果 链 的 状态 数 r 是 有 限 的 
(Е = 1,2,---,г), Д] 


весит = E imp. (38) 
j=1 j=1 
该 式 的 右 侧 显然 等 于 1. 但 是 我 们 假设 它 是 非常 返 的 , 那么 , 这 时 (根据 定理 5 的 (i)) 
右 侧 应 该 等 于 0. 由 此 得 到 的 矛盾 将 (i) 排除 . 
现在 假设 链 是 常 返 的 . 
由 于 定理 5 的 命题 只 剩 下 两 种 可 能 性 (iD 和 (ш). 需要 排除 (i). 事实 上 , 由 于 
对 于 所 有 ij < E limpi = 0, 则 像 非常 返 状态 的 情形 一 样 , 出 现 矛盾 . 


于 是 , 只 有 第 三 种 可 能 性 (iii), 口 

9. 练习 题 

1. 考虑 不 可 约 链 , 其 状态 集 为 0,1,2,… 那么 , 它 是 非常 返 的 , 当 且 仅 当 方程 组 
w= up, ј=0,1,:-: 


有 有 界 解 , 而 且 u 关 c (常数 ), i = 0,1,… 

2. 只 要 序列 и = (uo, u) ш 一 oo,i 一 оо, 使 得 对 于 一 切 j #0,ш > У щру, 
则 状态 集 为 0,1,2,.… 的 不 可 约 链 是 常 返 的 . | 

з. 状态 集 为 0,1,2,.… 的 不 可 约 链 是 常 返 的 和 正 的 , 当 且 仅 当 方程 组 





u=) upg j=0,1,... 
г 


有 不 恒 等 于 0 的 解 , 而 且 У lul < оо. 
4. 假设 马尔 可 夫 链 的 状态 为 0,1, 而 转移 概率 为 


роо = то, ро = Ро > 0, 
pi>0, ј=1+1, 


_ ]т:20, j=% 
P=) g> ў=л—1, 
0, 其 他 . 
设 
РТ, ра = 2-9% 
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证 明 如 下 的 等 价 关系 : 
ЖЕ © у pm = оо, 
非常 返 链 = 》 pm < co， 
EH =} рт = оо, У <= 
Pi 6 У pm = оо, Уе == 
5. 证 明 : 


Лк > ук, 
supp < fy < Ур. 
ыы n=1 

6. 证 明 , 对 于 任意 具有 可 数 状态 集 的 马尔 可 夫 链 , 对 于 转移 概率 р, 在 切 萨 罗 

(Е. Сеѕаго) 意义 上 永远 存在 极限 : 
ш = 150 = м. 

7. 考虑 马尔 可 夫 链 60,&1,…, Н &+ = (Ек) + т, К 0, 其 中 туо, Ж 
独立 同 分 布 随机 变量 序列 ， 其 概率 分 布 为 Р{ = = pj =0,1, 

(а) 试 写 出 转移 概率 矩阵 ; 

(b) 证 明 , ШЖ. po > 0,po + р < 1, 则 链 常 返 当 且 仅 当 


Ук <1 
к 


86. 可 数 马 尔 可 夫 链 的 极限 分 布 、 人 遍历 分 布 和 平稳 分 布 


1. 极限 值 п 与 平稳 分 布 Q 的 联系 ”我 们 从 一 个 一 般 结果 开始 , 它 首先 与 非 
常 清晰 的 极限 值 СГ = (mn, 72,…) 相 联系 , 其 中 л, = Шир) = =1,2,...), 以 及 与 平 
稳 分 布 Q = (q1,92,…) 相 联系 . 

定理 1 考虑 具有 可 数 状态 集 Е = {1,2,…} 的 马尔 可 夫 链 ， 其 转移 概率 
PEJ СЕ) 有 不 依赖 于 初始 状态 iC Е 的 极限 : 


п) 





= limpi, jEE. 
那么 ， 


(а) X т <1, È тру = nieE; 
j=1 j=1 
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(b) 下 面 的 式 子 二 者 必 居 其 一 : 


Ул; =0( PAA т =0,1Е Е) 或 Ут =1; 
j= 


A 
(о) юж Ў ту = 0, 则 马尔 可 夫 链 无 平稳 分 布 ; 如 果 Ў п = 1, 则 极限 值 的 向 

=] j= 
EN = (mra), 就 是 马尔 可 夫 链 的 平稳 分 布 ， 而 且 该 马尔 可 夫 链 再 无 其 他 平稳 


证 明 有 
< Š > 
Sn- Simri? < шир = о 
j=l j=) n j=1 
而 对 于 任意 СЕ, КСЕ, ж 

= Š со | 

У = = J. у\пр ру < lim рур ру = ару? бету. (2) 

і=1 i=l 1 i=l 


ЖЕ 这 里 出 现 的 不 等 式 和 下 极限 , 当然 是 “法 图 引 理 ” 的 推论 . 不 过 应 该 注意 , 在 
这 里 法 图 引 理 , 并 不 是 像 第 二 章 86 那样 , 用 于 由 概率 测度 定义 的 勒 贝 格 积分 , 而 是 
用 于 按 c- 有 限 ( 非 负 ) 测度 进行 积分 的 情形 . 

这 样 , 极限 值 的 向 量 N = (rt rz,……), 具有 如 下 性 质 : 


Dp тру су, јЄЕ. (3) 
j=1 i=1 
现在 证 明 , 最 后 一 个 不 等 式 实际 上 是 等 式 . 
设 对 于 任意 joeE, 有 
Dripio < тр. (4) 
i=l 
那么 ， | 
Sr’ (Ères) тн 
і=1 j=1 i=l i=1 j=1 i=l 
所 得 矛盾 说 明 , (3) 式 中 最 后 一 个 不 等 式 实际 上 是 等 式 . 由 于 对 于 j eE, 有 
<1, D rpa бы 


可 见 性 质 (a) 成 立 . ә. 
为 证 明 性 质 (b), 注意 到 (3) R У тру = ту, 经 积分 , 对 于 任意 n > 1 和 任意 
1=1 
1Е Е, 8 


> (п) 
Drip = п. 
1 
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根据 勒 贝 格 控制 收敛 定理 (第 二 章 86 定理 3), 由 此 可 见 


Е j ос 
А п А 
т = lim у тру = У ті limpi = С =) ту, 
izi j=1 i=1 


т) (- Ў.) =0, јЄЕ, 
的 人 有” 


这 样 , a(1 — a) = 0， Ti a= бя. ВТ а = 1 #Ё а = 0, 这 就 证 明了 命题 (b). 
最 后 证 明 (с). 为 此 ， ELE (q1,92，,… ) 是 某 一 平稳 分 布 , 则 


© ө 
Уер) =ч, В (È a) m=g, jEE, 
= 


i=1 


即 


因此 


其 中 后 一 个 等 式 成 立 , 是 根据 控制 收敛 定理 . 
所 以 , 如 果 © 是 平稳 分 布 , 则 Ха = 1, 从 而 对 于 此 平稳 分 布 一 定 (应 该 ) 满足 


条 件 : 对 于 一 切 e E, 有 ду = ту. 这 样 一 来, 假如 5 т = 0, 则 性 质 ЭЙ =1й 
ј= = 
不 可 能 成 立 , 说 明 在 这 种 情形 下 没有 平稳 分 布 . 
根据 (b) 还 有 一 种 可 能 性 En 在 这 种 情形 下 , 根据 NO 


本 身 是 平稳 分 布 ， тшщ Ей, MR о 是 另外 某 个 平稳 分 布 , ЙЕ ЛУ П 
合 . 于 是 , 在 Ў ту = 1 的 情形 下 , 平稳 分 布 的 唯一 性 也 得 到 证 明 . Е 
= 


2. 平稳 分 布 和 遍历 分 布 的 基本 定理 ”定理 1 给 了 平稳 分 布 存在 (同时 也 唯一 ) 
的 充分 条 件 . 该 条 件 在 于 对 于 一 切 уе Е, 存在 不 依赖 于 i c Е 的 极限 值 7; = limpi, 
并 且 至 少 对 于 一 个 状态 j є E, № ту > 0. 

同时 , 在 85 中 相当 详细 地 研究 了 极限 їтїр? 存在 的 更 为 一 般 的 问题 , 与 如 下 
一 些 链 的 “内 在 ”性 质 相 联系 ， 诸如 不 可 约 性 " 周期 性 , 常 返 性 和 非常 返 性 , 正常 返 性 
和 零 常 返 性 . 所 以 , 自然 正 是 用 这 些 由 转移 概率 矩阵 pij(i,j < E) 决定 的 、“ 内 在 ” 
性 质 的 术语 , 来 表述 平稳 分 布 存在 的 条 件 . 显然 同样 地 , 如 果 用 这 些 术语 指出 一 切 极 
ШИН т, > 0(j e Е) 的 条 件 , 则 根据 定义 (A 83 的 性 质 С) ЕП = (тут) 将 
形成 遍历 极限 分 布 . 

下 面 的 两 个 定理 将 给 出 这 些 问题 的 答案 
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定理 2 (平稳 分 布 的 基本 定理 ) ”考虑 具有 可 数 状态 集 巨 的 马尔 可 夫 链 .存在 
唯一 平稳 分 布 的 必要 和 充分 条 件 是 : 

(а) 恰好 存在 一 个 不 可 约 子 类 ， 

(b) 一 切 状 态 都 是 正常 返 的 . 

定理 3 (遍历 分 布 的 基本 定理 ) ”考虑 具有 可 数 状 态 集 的 马尔 可 夫 链 . 存在 遍历 
分 布 的 必要 和 充分 条 件 : 链 是 

(а) 不 可 约 的 ， 

(b) 正常 返 的 ， 

(с) 非 周期 的 . 

3. 定理 2 的 证 明 必要 性 . 假设 所 考虑 的 马尔 可 夫 链 有 唯一 平稳 分 布 , 记 作 
Qs. ЖА, RINER, ERER E 上 存在 并 且 唯 一 正常 返 子 类 . 

以 N(0 < N < ос) 表示 这 样子 类 的 潜在 可 能 数 . 

设 N=0, 而 j 是 忆 中 的 某 个 状态 .由 于 不 存在 正常 返 类 , 则 状态 j 可 能 或 者 
是 非常 返 的 , 或 者 是 零 常 返 的 . 

在 第 一 种 情形 中 , 由 55 的 定理 2 可 见 , 对 于 ie Е, Ж п, = тр 存在 , 并 
且 等 于 о. 

而 在 第 二 种 情形 中 , 由 $5 的 性 质 (37) 以 及 由 于 и, = оо (因为 状态 j EENE 
的 ) 可 见 , 这 些 极限 т, = limpi BEE, 并 且 等 于 0. 

这 样 , 当 N = 0 时 对 于 一 切 i,j Є E, 极限 л, = аруу) 存在 , 并 且 等 于 0. 因此 
在 这 种 情形 下 , 根据 定理 1 的 命题 (c), 在 这 种 情形 下 没有 平稳 分 布 , 从 而 N = 0 的 
情形 被 “存在 平稳 分 布 О” 的 假设 排除 . 

现在 假设 N = 1. 以 C 表示 唯一 正常 返 类 . 

如 果 该 类 的 周期 d(C) = 1, 则 根据 $5 定理 3 的 性 质 (26), 可 见 对 于 一 切 i,j €C, 





р иу, поо. 
而 车 j С, 则 这 一 状态 非常 返 . ЖА, 根据 85 定理 2 的 性 质 (21), 可 见 对 于 一 切 


ЕЕ, Ч 
mw, 


Pij 0, n= оо. 
设 
Е и (> 0), #3єС. 
wu- 性 #346. (5) 
A, 由 于 集合 С # с, 则 根据 定理 1 数组 Q= (91,42, ---) 是 唯一 平稳 分 布 , 从 而 
2 Si 


现在 假设 周期 d(C) > 1. 
设 C0,C1,… ,Ca-1 是 (正常 返 ) 类 的 С 的 循环 子 类 . 
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每 一 个 子 类 Ck, = 0,1,… ,d 一 1, 关于 转移 概率 矩阵 p49 ,i,j є С, 是 常 返 的 和 
非 周期 的 . 那么 , 如 果 ije Ck, 则 根据 85 公式 (36), 有 


ЕЕ 
所 以 在 每 一 个 集合 Cr Е, (由 于 定理 1 的 性 质 (b)) 数组 {d/njj E€ Cr} (关于 和 矩阵 
р, i j e С) 是 唯一 平稳 分 布 . 


特别 , 由 此 可 见 га 
Dé- w Die} 


зєс, № ес, № 


!,)є С = Со ++ Сал, 
6 JE 0 4-\ (6) 


18 С. 
因而 , 就 证 明了 , 对 于 所 考虑 的 马尔 可 夫 链 , 数组 = (q1,92,… ) 是 唯一 平稳 分 布 . 
事实 上 , 如 果 ie C, 则 


ра = м-р, 
ри = УР) 


JEC 


那么 , 如 同 (1) 式 , 有 
t- = limpi? > Уш Пр; =: Ep 


Ей! 
从 而 i 

T> > и” (7) 
但 是 i 
像 定理 1 的 证 明 (I (3) АЖ (4) А) 一 样 , 由 (т) АЖ (в) 式 , 可 见 (т) 式 中 实际 上 
是 等 式 : i 1 

n Ут (9) 


由 于 q = ир! > 0, M (9) 式 表示 数组 О = (q1,92,… ) 是 平稳 分 布 , 而 由 于 定理 
1 是 唯一 平稳 分 布 . 从 而 О = Q ^ 

最 后 假设 2<N < oo М = оо. 如 果 2<N < оо, 则 以 C1,… ,CN 表示 正常 
返 子 类 ; ШЖ N = оо, 则 以 C1,C?,… 表示 正常 返 子 类 . 
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设 数组 Q* = (47,45, ---) 是 类 С" 中 平稳 分 布 , 由 公式 (对 照 (5) 式 和 (6) 式 ) 


= иў\>0, jec, 
7? |0, 28 с* 





建立 的 平稳 分 布 . WA, 对 于 任意 非 负数 a1,a2,… : al + az +... = 1 М < оо, 
则 амы = … = 0), 数组 {a1Q!,… ,avwQY,…} 显然 是 平稳 分 布 . 因而 , 若 假设 
2 < № < оо, 则 导致 “一 切 平稳 分 布 的 集合 ”是 连续 统 , 但 这 与 所 作假 设 “ 平 稳 分 布 
唯一 " 矛盾 . 

因而 , 所 作证 明 表示 , 只 可 能 是 М =1. 换 句 话说 , 如 果 存 在 (唯一 ) 平稳 分 布 ， 
则 链 恰好 有 一 个 由 正常 返 状 态 形成 的 不 可 约 类 . 

充分 性 ”假如 马尔 可 夫 链 有 不 可 约 正常 返 状态 子 类 , 即 有 情形 N = 1 , 则 由 前 
面 的 叙述 可 见 , (由 定理 1 的 命题 (c)) 平稳 分 布 存在 而 且 唯 一 . 

于 是 , 定理 2 完全 地 得 证 . o 

а. 定理 3 的 证 明 实质 上 , 这 一 定理 的 证 明 全 部 必要 的 , 都 包含 在 定理 2 及 其 
证 明 的 论述 中 . 

充分 性 “如果 利用 定理 2 的 证 明 中 记号 , 则 由 定理 的 条 件 , 有 N = 1,C = 已 和 
а(Е) = 1 ( 非 周 期 性 )， ЖА, 由 定理 2 的 证 明 中 关于 “ N = 1 的 情形 ”的 讨论 , 可 
见 Q= (gq1,92,…), 其 中 ау = иу.) Е, 是 平稳 分 布 , 同时 又 是 遍历 分 布 , 因为 所 
Ж иу! < %,jeE. 

Ж, 遍历 分 布 N = (mi,72,…)(= ©) 的 存在 性 得 证 . 

必要 性 ”如 果 存 在 遍历 分 布 ЇЇ = (m,m), 则 根据 定理 1, 存在 并 且 唯 一 等 
同 于 Г 的 平稳 分 布 Q. 

由 定理 2 的 论断 (及 其 证 明 ), 可 见 N = 0 和 2 < М < оо 不 可 能 出 现 , 即 只 
有 N = 1, 并 且 仅 存在 唯一 由 正常 返 类 组 成 的 不 可 约 类 С. RA FER C= ЕЖ 
d(E)=1. 
用 反 证 法 , 假设 C # Е Ñ d(C) = 1, 则 仍然 由 于 在 定理 2 的 证 明 中 关于 “N = 1 
的 情形 ”的 讨论 , 可 见 存在 状态 у # С, 使 对 一 切 ie Е, 由 p — 0. 然而 , 这 与 对 于 
一 切 ie 已 m = шар) > 0 矛盾 . 

这 样 , 在 d(C) = 1 的 情形 下 , 有 C =E M а(Е) = 1 ( 非 周期 性 ). 

最 后 , 如 果 C # E Яй d(C) > 1, 则 仍然 由 于 在 定理 2 的 证 明 中 关于 “N =1 的 
情形 ”的 讨论 , 可 见 存在 平稳 分 布 = (au 92,……), 其 中 某 些 qj = 0, 这 与 “页 = Q, 
TN = (ri,ra,…-) 是 遍历 分 布 且 (根据 定义 ) 所 有 п; > 0,J Е" ЖИ. 口 

5. 定理 3 的 推广 ”根据 平稳 (不 变 ) 分 布 Q = (q1,q2,…) 本 身 的 定义 , 是 满足 
条 件 

















© 
420, jEE={1,2,…}, Dg=1 (10) 
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的 一 组 数 , 并 且 服 从 方程: 
g=} up jEE. (11) 


i=l 


换 一 种 提 法 , 可 以 认为 , 平稳 分 布 = (qg) 是 方程 组 
шу 一 Sb jeE (12) 
izi 
的 一 个 解 , 其 中 方程 组 服从 非 负 性 条 件 和 规范 性 条 件 : 
Tj>0，jEE 和 Sol. 


如 果 满 足 定理 3 的 条 件 , 则 平稳 解 存 在 , 并 且 同 时 也 是 遍历 的 . 因此 , 由 定理 1 
的 命题 (с) 可 见 , 方程 组 (12) 在 序列 类 


эс 
(21.12), 2) 20. jEE, у ту=1 
j= 


中 有 解 并 且 唯一 . 

实际 上 , 由 此 可 以 得 到 更 多 结论 . 具体 地 说 , 这 里 定理 3 的 条 件 也 成 立 , 从 而 存 
在 遍历 分 布 JI = (m, r2). 

在 此 条 件 下 , 我 们 考虑 在 如 下 (更 广泛 的 ) 序列 类 


(1,22), Ti ER, jEE, Ув < оо, у» =1 
j=1 
中 , 方程 组 (12) 解 的 存在 性 问题 . 我 们 证 明 在 该 类 中 , 解 唯一 并 且 遍 历 分 布 I 就 是 
该 唯一 解 . 
事实 上 , WR (zt rz，……) М, 则 由 于 р jzj| < оо, 可 以 得 到 如 下 一 系列 等 式 : 
= D ру = Ў E) Pij = Za (Ères) 
i=l 


і=1 \k=1 =1 
оо 
D › 
z Dm = “= Уза, 
k=1 


其 中 n>1. 当 n 一 oo 时 求 极限 , (根据 控制 收敛 定理 ) 对 于 任意 ке Е, 由 此 得 


оо 
gs (> =) Tie, БЫ п ру). 


k=3 


由 于 根据 假设 х lekl =1, #2 = ту] Є Е, 而 这 正 是 需要 证 明 的 . 
=l 
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6. 练习 题 
1. 对 于 转移 概率 矩阵 为 


12 0 12 0 
0 0 0 1 
1/4 1/2 14 0 
о 12 12 0 


的 马尔 可 夫 链 , 讨论 其 平稳 分 布 , 极限 分 布 , 遍历 分 布 问题 . ы, 
2. ЖР = (р) 是 有 限 双 随 机 矩阵 ( 即 对 于 i = 1 т, р ру = 1; 而 对 于 


Pe Em = 1). 证 明 , 对 于 相应 的 马尔 可 夫 链 ， 向 量 @= (пу, т) 
是 平稳 分 布 . 
з. Е {0,1} 是 马尔 可 夫 链 的 状态 空间 , 而 


ja 
P= Ы “| о<а<1, 0<8<1 
1-8 B 


是 其 转移 概率 矩阵 , 讨论 该 马尔 可 夫 链 的 , 极限 分 布 , 遍历 分 布 , 平稳 分 布 问题 . 


$7. 有 限 马尔 可 夫 链 的 极限 分 布 、 遍 历 分 布 和 平稳 分 布 


1. 有限 链 转移 概率 的 渐 近 性 质 根据 85 定理 6, 任意 不 可 约 和 非 周期 的 、 具 
有 有 限 状态 集 的 马尔 可 夫 链 , 都 是 正常 返 的 . 这 一 事实 使 得 有 可 能 , 给 86 的 定理 3 
以 如 下 表述 .( 对 照 83 的 问题 , A, В, С 和 О). 

定理 1 假设 X = (Xano 是 具有 有 限 状态 集 Е = {12,... г} 的 马尔 可 夫 
链 , 并 且 是 不 可 约 的 和 非 周期 的 . 

那么 , 如 下 命题 成 立 . 

(а) 对 于 一 切 Je Е, 存在 不 依赖 于 初始 状态 ie Е 的 极限 值 л, = limpi. 


(b) 极限 值 = (ri,… ,mr) 是 概率 分 布 , 即 л, >0, Хм = =1,j €E. 
(с) 此 外 , 对 于 一 切 j Е, ARAA п, = uz >0, 其 中 ш 是 首 返 状态 j 前 度 过 
的 平均 时 间 : 
ш = Уп = Ет), 
п=1 
其 中 (站 =inf{n >21: Xn = j}. 从 而 , Жа ЇЇ = (ri,… ,mr) 是 遍历 分 布 . 
(d) 平稳 分 布 Q = (gq1,… ,gr) 存在 、 唯 一 并 且 等 于 位 = (т, ,mr). 
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2. 不 可 约 性 和 非 周 期 性 对 有 限 链 的 意义 ”作为 定理 1 的 补充 , 我 们 引进 如 下 定 
理 , 其 作用 体现 在 “不 可 约 性 ”和 “ 非 周 期 性 ”上 . 

定理 2 БЕХ = (Xn)n>0 是 具有 有 限 状 态 集 巨 一 {1,2,… т} 的 马尔 可 夫 
链 , 并 且 是 不 可 约 的 和 非 周期 的 

那么 , 如 下 命题 成 立 . 

(а) 链 是 不 可 约 的 和 非 周 期 的 (4 = 1); 

(b) 链 是 不 可 约 的 , 非 周期 的 (d = 1), 正常 返 的 ; 

(с) 链 是 遍历 的 ; 

(d) 存在 по, ЎТ п> по, 有 


тіп 
EE р) 


证 明 ШАХ (0) (с), 在 第 一 章 812 定理 1 中 已 经 证 明 . 相反 的 蕴含 关系 
(с)=(4) 显然 . #@ ЖЖ (а)=(Ь), 由 85 定理 6 可 见 ; 而 蕴含 关系 (b)>(a) 显然 . > 
后 , 命题 (b) 与 (с) 等 价 , 包含 在 86 定理 3 中 . 


88. 作为 马尔 可 夫 链 的 简单 随机 游 动 


1. 简单 随机 游 动 . 波 利 亚 (G. Polia) 定理 d- 维 简单 随机 游 动 指 , 描绘 “ 质 
点 ”在 格子 的 结 点 74 = {0,+1,+2,..-}4 上 运动 的 、 齐 次 马尔 可 夫 链 , 这 是 该 “ 质 
点 ”可 能 以 某 一 概率 逗留 在 每 一 状态 , 也 可 能 以 一 定 概率 转移 到 相 邻 的 主题 之 一 . 

#1 а= 1，, 而 链 的 状态 集 为 E= Z = {0, +1, =2,...}, 其 转移 概率 矩阵 有 
如 下 形式 : 


р j=i+1, 
magia ј=1-1, 
0， 其 他 ， 
其 中 p+g=1. 
该 矩阵 对 应 于 图 
р р 
< 
它 直 观 上 描绘 该 链 可 能 的 转移 . 


如 果 = 0, 则 指点 青 定向 左 移 ; ШЖ р = 1, 则 指点 肯定 向 右 移 . 

这 些 “ 确 定性 ” 情形 没有 什么 意义 , 况且 这 时 的 一 切 状态 都 是 非 本 质 的 . 因此 ， 
我 们 将 假设 0 < p < 1. 

在 这 样 的 条 件 下 , 链 由 一 个 本 质 互通 状态 类 组 成 . 换 句 话说, 在 假设 0 < 了 < 1 
F, 链 是 不 可 约 的 ( 见 84). 
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对 于 任意 je E, 由 二 项 分 布 的 公式 (第 一 章 рр), 可 见 
из = Сри)" = Coo". o 
根据 司 特 林 公式 (第 一 章 82 的 (6) Ж; 亦 见 练习 题 1): 
п! ~ у27тп"е". 
从 而 , 由 (1) 式 可 见 


рг" ~ (рд) ў (2) 


Van 
因此 
Ур” =o, #p=4 (3) 
n=l 
Уу ру” <, Epa (4) 


пті 
由 这 些 公式 和 85 的 定理 1, 得 到 如 下 结果 : 

在 集合 已 = 也 = {0, +1, 2,...} 上 的 简单 一 维 随机 游 动 , Фред 1/2, МА 
常 返 的 和 对 称 的 ; ж р #1, 则 是 非常 返 的 . 

在 第 一 章 10 曾经 证 明 对 于 р = q = 1/2 的 情形 , 当 п 充分 大 时 


(2n) 1 
万 Пули (5) 


因此 


оо 


ш = Уп)? = о, јЄЕ. (6) 


п=1 
从 而 , 这 时 一 切 状态 是 常 返 的 和 有 零 的 . 因此 根据 85 的 定理 5, 在 一 切 0<p <1 的 情 
ЖТ, РЕЖ i A j, 当 一 oo 时 Pp 一 0. 由 此 可 见 (86 的 定理 1), 极限 分 布 ， 
以 及 平稳 分 布 和 遍历 分 布 都 不 存在 . 

#12 设 d = 2. 考虑 对 称 的 情形 (对 应 于 例 1 中 p=g= 1/2 的 情形 ): 质点 向 
左 、 向 右 的 、 向 上 或 向 下 移动 概率 都 等 于 1/4. 

为 确定 计 , 固定 零 状 态 0 = (0,0). 假设 开始 处 于 零 状态 , 并 讨论 “质点 ” 常 返 或 
者 非常 返 零 状态 的 问题 . 

为 此 , 我 们 讨论 游 动 质 点 如 下 的 那些 “轨道 ”: 质点 向 右 移动 i 步 、 向 左 i 步 、 
向 上 了 步 和 向 下 j 步 . 假如 2i+ 27 = 2n, 则 说 明 “ 质 点 ”从 零点 出 发 , 经 过 2n 步 必 
然 又 返回 该 状态 . 显然 , 经 奇数 步 “ 质 点 ”不 可 能 返回 零 状态 . 

由 此 可 见 , 从 状态 0 仍然 返回 状态 0 的 转移 概率 决定 于 下 面 的 公式 : 


pt9 =0, n=0,1,2,.… 
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图 41 平面 上 的 游 动 


В (由 全 概率 公式 ) 


(2n) (әл)! үтү" 
Poo = тата (2) » n=1,2,. 
ванны ЧОРО \4 


( 亦 见 第 一 章 82 第 2 小 节 ). 
在 (т) 式 中 的 和 号 下 分 式 的 分 子 与 分 母 同 乘 以 (n!)? , 得 


% 1 2n п N 1 2n 
же - (1) cc (0) (су 
i=0 
其 中 用 到 公式 : Ө 
ухас". 
і=0 


(第 一 章 82 练习 题 4 
根据 司 特 林 公式 , 由 (8) 式 可 得 д ~ 二 ,因而 


= (2 
у рф” = оо. 


n=0 


(7) 


(9) 


根据 对 称 性 , 类 似 的 论断 , 当然 不 仅 对 零 状 态 成 立 , 而 且 对 于 任何 状态 (i,j) 也 


成 立 . 
像 4=1 的 情形 一 样 , 由 55 定理 1 的 公式 (9), 得 到 如 下 结果 : 


ERS Е = 72 = {0,+1,42,...}? 上 的 简单 双 对 称 随机 游 动 是 常 返 的 . 


例 3 ”结果 表明 , 当 d > 3 时 , 在 状态 Е = 74 = {о,+1,+2,...}1 上 对 称 随机 


游 动 , 非常 明显 的 不 同 于 上 面 讨论 的 d= 1 和 d= 2 的 情形 . 
具体 地 说 ， 


在 集合 已 = т = {0,+1,+2,..-}% 上 的 简单 4 维 对 称 随机 游 动 , 对 于 任意 


d>3 是 非常 返 的 . 
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这 一 事实 的 证 明基 于 如 下 考虑 : 对 于 d > 3, 当 n э оо 时 , # Жр” 有 如 下 浙 
近 式 : 
(2n) _ eld) (10) 


ij ndz’ 


其 中 c(d) 是 某 一 依赖 于 维 数 d 的 正常 数 . 
我 们 现在 证 明 а = 3 的 情形 , 而 4 > 3 的 情形 的 证 明 留 做 练习 题 . 


由 于 随机 游 动 对 称 性 的 假设 , 可 见 “ 质 点 ”以 概率 1/6 沿 (空间 3 Ж) ATA “I 
六 个 方向 之 一 移动 一 步 : 





假设 “质点 ”从 点 0=(0,0,0) 出 发 . ЖА, 像 4 = 2 的 情形 , 由 多 项 分 布 公式 (第 
一 章 82), 有 
2) _ (2п)! түг" 
= > н P (8) 


(1.3):0<+ј<п 


=2"0, У; а] 的 


(bj):0Sitign 


nl ya 
<er mma У иг (5) 
liln -i 7)! 
(een Hn i A \3 
= С„2-2" 03,3", 


其 中 
п! 1. (19) 


<= UDIAN [= зд) 
并 且 利用 了 明显 的 公式 : 


n! j Р 
пла: (5) © 


(2.7):0<1+ј<т 
下 面 将 要 证 明 | 
ти 
С» = Ты" то 
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运用 司 特 林 公式 , 由 (13) 式 , 可 得 


ЕЗ Р 3V3 
те (14) 
因而 , 由 (11) 式 , 可 得 
& 
у юш! < оо (15) 
1 





于 是 , 根据 §5 的 定理 1, 状态 0=(0,0,0) 是 非常 返 的 . 由 于 对 称 性 , 对 于 Е = 2° 中 
的 任何 其 他 状态 , 有 类 似 的 结果 . 
只 剩 下 证 明 (13) R. 
设 1 
МЕ п! 
mn(i,j) = але: 
而 io = io(n),jo = jo(n) 的 值 满足 


max mn(i,j) = mn(io, јо). 
A n(i, j) = mn(io, jo) 


取 4 个 点 (io — 1, jo), (io + 1, jo), (io, о — 1), (io, jo +1). 由 于 相应 的 值 mn(io ~ 
1, jo), mn (io + 1, jo), Mn (io, jo — 1) 和 (io, jo +1) 不 大 于 malio, jo), 可 得 4 个 不 等 式 : 


n—io—1<2jo <п-ю+1 


n—jo—1 <2io < п – јо +1. 


由 这 些 不 等 式 , 可 得 
а) ~ 5. дбн) ~ 3 

由 此 得 所 要 证 明 得 (13) R. 

归纳 所 分 析 а = 1,2,3 的 情形 , 得 如 下 波 利 亚 (С. Рона) 的 结果 . 

定理 当 d=1 或 4= 2 时 ,在 状态 集 已 = 74 = {0,+1,+2,...}4 上 的 简单 对 
称 随机 游 动 是 常 返 的 , 而 当 d = 二 3 (及 d > 3) 时 是 非常 返 的 . 

2. 简单 随机 游 动 的 例 (Е с Z4,d = 1) 上 面 的 例子 讲 的 是 , 在 “整个 ” 空间 74 
中 的 简单 随机 游 动 . 在 这 一 小 节 , 将 要 讨论 的 简单 随机 游 动 , 其 相 空间 Е 严格 包含 在 
74 之 内 . 这 里 , 我 们 讲 局 限于 d = 1 的 情形 . 

Фа 考虑 简单 随机 游 动 , 其 相 空间 Е = {0,1,2,...}, 其 中 状态 0 是 吸收 的 ， 
而 其 转移 概率 如 下 图 所 示 : 
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这 里 , 状态 0 是 正常 返 状态 , 并 且 构成 唯一 不 可 约 子 类 . (其 余 状态 都 是 非常 返 
的 .) 根据 86 的 定理 2, 存在 并 且 唯一 平稳 分 布 = (gq), do = Lgi = 0(i = 
1,2,...). 

所 考虑 的 随机 游 动 直观 上 提供 了 一 个 例子 : 对 于 某 i 和 j, 极限 Втр FE, 
但 是 依赖 于 初始 状态 , 同时 说 明 在 此 随机 游 动 的 例子 中 不 存在 遍历 分 布 . 

ER, pO = 1, 而 对 于 j = 1,2,… 29 = 0， 经 简单 运算 , 可 见 对 于 一 切 
ij=1,2 5 — 0. 

现在 证 明 对 于 一 切 i = 1,2,…, 极限 a(i) = lim pio 存在 , 并 且 对 其 有 如 下 公式 : 


n _ J (a/p) Р>4, 
a(i) = n S (16) 

由 该 式 可 见 , 对 于 р > 4 的 情形 (* 有 向 右 运动 的 倾向 "), 由 状态 ili = 1,2,…) 
向 状态 0 转移 的 极限 概率 ali) = lim pio ,事实 上 依赖 于 i, 并 且 随 着 ; 的 增长 以 几 
何 的 速度 减 小 . 

为 证 明 (16) 式 , 首先 注意 到 , 由 于 状态 0 是 吸收 状态 , 故 р) = Уу о, 从 而 
极限 ali) = limpio 存在 , 并 且 等 于 fio, 即 概率 a(i) 是 “质点 ”由 状态 i 出 发 , 迟早 
到 达 状 态 “ 零 ”的 概率 . 对 于 这 些 概率 , 在 第 一 章 812 ( 亦 见 第 七 章 82), 当 ali) = 1 
时 导出 了 递 推 公式 : 

a(i) = pa({i + 1) + qa(i — 1). (17) 
该 方程 的 通 解 为 
a(i) = а + ba/p)’, (18) 
而 由 条 件 a(0) = 1, 可 见 常数 H b MER а+ь 1. 

如 果 假 设 g > р, 则 因为 ali) 有 界 , 立即 得 b= 0, 所 以 ali) = 1. 这 一 结论 十 分 
清楚 , 因为 当 g > p 时 , “质点 ”有 沿 到 达 零 状态 运动 的 倾向 . 

假如 р > а, 则 情况 相反 : 有 向 右 移 动 的 倾向 , 且 自 然 想到 


a(i)—= 0, #— оо, (19) 
即 a=0, 而 
a(i) = (а/р)“. (20) 


为 证 明 该 等 式 , 我 们 并 不 先 证 明 (19) 式 , 而 是 通过 其 他 途径 . 
除 在 点 0 的 吸收 屏幕 外 , 我 们 在 引进 在 点 N 的 吸收 屏幕 . 以 anli) 表示 , 从 点 
i 出 发 的 “质点 ", 到 达 状 态 0 早 于 到 达 状态 N 的 概率 . 概率 anli) 满足 边界 条 件 为 


an(0)=1, an(N)=0 
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的 方程 (17), 而 且 在 第 一 章 59 已 经 证 明 
i N 

1- (8 

p 


由 此 可 见 lim ax (i) = (9/р)', 从 而 为 证 明 (20) 式 的 结果 , 只 需 证 明 


an(i) = (21) 


a(i) = limax(i). (22) 


这 在 直观 上 很 清楚 . 严格 的 证 明 有 如 下 一 些 途径 . 
假设 “质点 ”从 固定 i 状态 出 发 . ЖА, 


а@) = Pi(4), (23) 


其 中 А 是 事件 “存在 М, 使 由 i 点 出 发 的 ' 质 点 到 达 状态 0 早 于 到 达 状态 N”. 如 
ж 
4 = {" 质 点 "到达 状 态 0 早 于 状态 N}， 


则 4= 0 Ак. 显然 , Ак С Ака, В. 
N=i+1 


Р; ( 0 ax) = ш РКАм). (24) 
N=i+1 
Я» anli) = Pi(4w), 所 以 由 (23) RA (24) R, 立即 得 (22) R. 

这 样 , ШЖ р> а, 则 极限 值 lim pio” 依赖 于 i 如 果 p < а, 则 对 于 任意 i, 极限 值 
пруд) =, В тру! = 0,721. FE, 在 这 种 情形 下 存在 不 依赖 于 i 的 极限 分 布 
= (мо, т1,:::), 其 中 т = йар. 这 时 ЇЇ = (1,0,0,…). 

例 5 考虑 简单 随机 游 动 , 其 相 空间 Е = {0,1,… N} 其 中 “边界 ”状态 0 和 
N 是 吸收 的 : 





这 里 , 存在 两 个 不 可 约 的 正常 返 类 : {0} 和 {№}, 而 所 有 其 他 状态 类 1,2,…,N 一 1 
都 是 非常 返 的 . 由 86 定理 2 的 证 明 可 见 , 存在 平稳 分 布 = (go,q1,… ,gn) 的 连续 
统 , 且 其 平稳 分 布 都 具有 如 下 形式 : qı = … = gn-1 = 0,4 = aqu = b,a > 0,b > 
0,a+b=1. 
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根据 第 一 章 $9 第 2 小 节 . 有 


impo = :- ($) | | (25) 


Шор = 1 – limp 和 limp = 0,1 < 1<М-1. 
n n n 


需要 强调 , 这 里 及 前 面 例子 中 , 极限 值 limp, 依赖 于 初始 状态 . 
例 6 考虑 简单 随机 游 动 , 其 相 空 间 Е = {0.1.…} , 且 在 状态 0 是 反射 壁 : 


所 考虑 的 链 本 质 上 依赖 于 P 和 д. 

WR р> 则 游 动 的 “质点 ”有 向 右 移动 的 倾向 . 而 在 “ 零 " 状态 存在 反射 壁 的 
情形 , 与 例 4 中 游 动 相 比 仅仅 在 于 , 对 于 例 4 的 情形 在 “ 零 " 状态 可 以 越过 “ 壁 障 ”. 
这 是 全 部 状态 都 是 非常 返 的 ; 对 于 一 切 ус Epp 一 0,n 一 оо; 平稳 分 布 和 遍历 
分 布 都 不 存在 . 

如 果 р < а, 则 游 动 的 质点 有 向 左 移动 的 倾向 . 这 时 , 链 是 常 返 的 . 当 р = а 时 链 
也 是 常 返 的 . 

现在 给 出 平稳 分 布 = (go,q1,… ) 应 满足 的 方程 组 (对 照 86 的 (12) Ж): 


чо = 914, 
Ф = 4 + 924, 
92 = ИР + 934, 


由 此 , 有 


Фф = 9(41 + 92), 
42 = 4(92 + 4), 


于 是 
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假如 p=g, 则 gl = gz = …， 从 而 方程 组 没有 满足 条 件 
0=1 а= аа 
j=1 

的 非 负 解 . 


这 意味 着 , 当 p = = 1/2 时 不 存在 平稳 解 . 这 时 链 的 全 部 状态 都 是 常 返 的 . 
最 后 , 设 p < 9. 由 条 件 рэа =1, 可 见 
j 


2 
p, {р 

9 a+1+2+ (2) 十 …| =1. 
| а \ч 


因此 


а 1-1 
vE а 
Фі т 考虑 简单 随机 游 动 , 相 空间 为 = {0,1,… ,NN}, 而 状态 0 和 N 是 反射 
#: 


1 1 р 2 р р р 
Е н oga 


这 里 , 链 的 状态 是 一 个 不 可 约 类 . 状态 是 周期 为 4 = 2 的 正常 返 的 . 根据 86 的 
定理 2, 该 链 有 唯一 平稳 分 布 = (9,41, ,qn). 在 条 件 


со 
Уја=1, 420, јЄЕ, 
i=0 


F, 解 方 程 组 = аро, 得 
g” 
4 = — ру 1N- (26) 


而 go = q19, 4N = 9-14 - 
由 86 的 定理 3, 以 及 所 考虑 链 的 周期 为 d = 2, 可 见 遍 历 分 布 不 存在 . 可 以 直接 
得 出 结论 , 这 里 无 遍历 分 布 . 例如 , 对 于 NN = 2 
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那么 , 易 见 p80 "о = 0. 因而 Боро 不 存在 . 与 此 同时 , 由 (26) 
式 可 见 ,平稳 分 布 : 





Q = (40, 91,42), 
并 且 具 有 如 下 形式 : 


>> ni 1 
40 = 59 4 = 5, Ф = 5р. 


3. 利用 简单 随机 游 动 描绘 现实 物理 过 程 的 示例 “ 书 中 叙述 的 资料 表明 , 简单 随 
机 游 动 是 一 个 经 典 模型 基于 这 一 模型 ,“ 精 练 了 ”概率 的 思想 体系 , 使 得 概率 的 技 
术 更 加 完美 , 发 现 了 许多 概率 - 统计 的 规律 性 . 例如 , 考虑 只 有 两 个 可 能 值 的 伯 努 利 
随机 变量 21,6, 之 和 Xn = &1 十 … 十 En, 从 而 , Х = (Xn)n>1 是 简单 随机 游 动 
(也 是 马尔 可 夫 链 ). 基于 X = (Xn) 发 现 了 许多 规律 性 , 诸如 , 大 数 定律 (第 一 章 
$5), 棣 莫 弗 - 拉 普 拉 斯 定理 (第 一 章 86), 反正 弦 定律 (第 一 章 510), 等 等 . 

在 这 一 小 节 , 我 们 考虑 两 个 离散 扩散 模型 , 它们 是 “利用 简单 随机 游 动 , 如 何 反 
映 现实 的 物理 过 程 ”的 很 好 示例 . 

А. 埃 伦 弗 斯 特 (P. Ehrenfest, T. Ehrenfest) 模型 

像 例 7 一 样 , 我 们 将 考虑 简单 随机 游 动 , 假设 其 相 空 间 为 = {0,1,… N}, E 
在 状态 0 和 N 各 有 一 个 反射 壁 . 

在 状态 0 和 N 的 转移 概率 为 po = 1 和 pyw- =1. 在 其 余 状 态 i=1,… ,NN 一 
1, “质点 ”只 可 能 以 概率 


i 
1- 廊 ,j=i+l, 
pr=4i N (27) 
j=i-1 


向 左 或 向 右 移动 一 步 . 

在 1907 年 P. 埃 伦 弗 斯 特 和 Т. 埃 伦 弗 斯 特 [124], 在 研究 统计 力学 的 一 种 模型 
时 , 得 到 了 具有 上 述 转 移 概 率 的 马尔 可 夫 链 . 这 一 统计 力学 中 描绘 气体 分 子 的 模型 
Ж: 仪器 有 两 个 (封闭 的 ) 箱子 A 和 В, 由 薄膜 连接 在 一 起 , 气体 分 子 由 一 个 箱子 (A 
或 В), 通过 薄膜 的 ( 微 ) 小 孔 移动 到 另 一 个 箱子 (B R A). 

假设 在 所 观察 的 两 个 箱子 中 , 分 子 的 总 数 等 于 N, 且 每 一 步 从 一 个 箱子 向 另 一 
个 箱子 的 移动 是 以 如 下 的 方式 积极 地 进行 的 : 以 概率 1/N 随机 地 选 一 个 分 子 , 使 它 
转移 到 另 一 个 箱子 ; 并 且 每 一 步 欲 转 移 分 子 的 选取 , 与 过 去 的 “历史 ”无 关 . 


294. 第 八 章 ”形成 马尔 可 夫 链 的 随机 变量 序列 





设 X 是 这 样 分 子 的 个 数 : (例如 ) 分 子 一 “开始 ” 于 时 刻 在 某 一 个 箱子 A 中 ， 
为 描绘 分 子 的 移动 的 机 制 有 马尔 可 夫 性 (练习 题 2): 


了 P{Xn+l = ЛХо = io, Xi ЕЙ, ,Xn = in- Xn = i} 
= Р(Х. = ЛХ» = ih, (28) 
此 外 ， 
P{Xn+1 = ЛХ =} = ру, (29) 


其 中 py 由 (27) 式 决定 
对 于 该 模型 存在 由 如 下 二 项 公式 
N 
o=cx (3) j=0b oN (30) 
决定 的 (练习 题 3) 平稳 分 布 Q = (qu, qi,… зам). 这 里 所 有 考虑 的 链 是 常 返 的 (练习 
题 4). 

需要 指出 , 例如 当 N 为 偶数 时 . 概率 gG = 0,1,.… ,N) Æ “中间 " 值 N/2 上 
达到 最 大 值 ,这 恰好 对 应 于 最 可 能 的 “平衡 " 状态 , 即 这 时 两 个 箱子 中 的 分 子 数 相同 . 

可 以 想到 , 这 样 建立 的 随时 间 的 “平衡 ", 带 有 (由 上 面 引进 的 分 布 Q 描绘 的 ) 概 
率 -统计 特点 . 

我 们 还 要 指出 , 在 直观 上 分 子 的 数量 随时 间 “稳定 的 " 可 能 性 十 分 明显 : 状态 i 
离 “ 中 心 ” 什 越 远 , (由 于 (27) 式 ) 向 该 值 方向 运动 的 概率 就 越 大 . 

в. р. 伯 努 利 - 拉 普 拉 斯 模型 

考虑 在 一 定 意义 上 与 埃 伦 弗 斯 特 模型 类 似 的 模型 ， 该 模型 是 D. 伯 努 利 (1769 
年) 提出 的 , 后 来 拉 普 拉 斯 (1812 年 ) 在 描绘 不 可 压缩 液体 (而 不 是 质点 ) 过 程 时 提 
出 来 的 . 

更 精确 地 说 , 有 两 个 样品 箱 A 和 B, 含有 оу 个 质点 , 其 中 N 个 质点 是 “白色 ” 
的 , 而 另外 N 个 质点 是 “黑色” 的. 

ж “系统” 处 于 状态 i, 其 中 ie 已 {0,1,… N} 如 果 在 箱 A 中 恰好 有 i 个 
“白色 " 质点 和 N -i 个 “黑色 ”质点 . 假设 “不 相 容 性 " 是 指 , 对 于 所 观测 的 状态 i, 
在 箱 B 中 有 N _i 个“ 白色" 质点 ,有 1 个“ 黑色" 质点 . 每 箱 中 质点 的 总 数 保持 为 
常数 , 并 且 等 于 N. 

在 每 一 步 п, 从 每 箱 中 随机 地 ( 即 以 概率 1/N) 选 一 个 质点 , 并 且 这 些 点 改变 位 
置 假设 这 一 (随机 ) 从 箱 中 选择 质点 的 过 程 是 独立 进行 的 , 并 且 以 后 的 选择 按 同样 
的 模式 进行, 而 且 与 以 往 的 阶段 无 关 . 
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Их, 表示 A 箱 中 “ 白 ” 色 质点 的 个 数 . 那么 , 质点 变换 的 机 制导 致 马尔 可 夫 
性 (28) 的 成 立 , 这 是 (29) 式 中 转移 概率 р, 决定 于 如 下 表达 式 (练习 题 5): 


$ 
Pj = (1-х). ј=і+1, (31) 


其 中 py =0,ШЖ li- jl > l,i = 0,1, N. 
像 埃 伦 弗 斯 特 模型 一 样 , 这 里 的 所 有 状态 也 都 是 常 返 的 .平稳 分 布 Q = (ао, 
ql,… ,4N) 存在 而 且 唯 一 , 并 且 由 如 下 公式 表示 (练习 题 5): 
Ci )2 
y= © I 





=0,1, ‚М. (32) 


4. 现实 物理 过 程 的 示例 (更 加 复杂 的 情形 ) 在 这 一 章 的 开始 曾经 指出 , 这 一 
章 的 基本 内 容 是 ,“( 随 着 n 的 增长 ) 无 后 效 系统 的 渐 近 性 质 ", 上 一 节 内 容 表明 , 研究 
的 是 , 具有 可 数 状 态 集 Е = {0,1,… ,N,…:} 的 马尔 可 夫 链 的 , 转移 概率 pi 当 п % 
分 大 时 的 性 质 , 包括 简单 随机 游 动 , 转移 只 可 能 发 生 在 相 邻 状态 之 间 的 情形 . 

很 重要 的 是 , 对 于 具有 更 加 复杂 状态 空间 的 马尔 可 夫 链 研究 类 似 的 问题 . 关于 
这 类 内 容 , 例如 可 以 见 [75], [117]. + 

5. 关于 术语 “离散 扩散 模型 ”的 说 明 上面 讨论 的 两 个 模型 ( 埃 伦 弗 斯 特 模型 
和 伯 努 利 - 拉 普 拉 斯 模型 ) 曾 称 之 为 离散 扩散 模型 . 

现在 关于 这 一 名 称 做 一 些 说 明 , 为 此 考虑 R 中 随机 游 动 的 极限 性 质 ， 设 Sn = 
Erte t Enn > 1, So = 0, 其 中 &,62,… 是 独立 同 分 布 随机 变量 序列 , В. Bé; = 0, 
Dé&;=1. 设 X=0, 而 


n Sm g 
х= я = ив), 0<#<1. 


显然, EI (0, XN ХУ, XN) 可 以 视 为 在 时 刻 A,2A，… ,1, 其 中 А = 1/m, Ж 
度 的 量 级 为 VA(AXRs = Хр -Xha = УД) 的 简单 随机 游 动 

像 在 第 七 章 88 注 4 已 经 指出 的 那样 , 这 一 随机 游 动 X" = (Хр) осет 的 全 部 有 
限 维 分 布 , 弱 收敛 于 维 纳 过 程 (布朗 运动 ) W = (Wi)o<t<i; 此 外 , 在 第 七 章 88 注 4 
中 还 指出 , 函数 收敛 性 也 成 立 , 即 过 程 X" 之 分 布 向 过 程 W 之 分 布 的 弱 收 全 (收敛 
的 意义 , 仍然 是 经 验 过 程 向 布朗 桥 的 收敛 性 ; 见 第 三 章 813 的 第 4 小 节 ). 维 纳 过 程 
是 扩散 过 程 典型 的 (并 且 是 基本 的 ) 例子 (Ж. [69, У. Ш), [21], [131]). 这 一 事实 恰好 说 
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明 ，X" 类 型 的 过 程 , 以 及 出 现在 埃 伦 弗 斯 特 模型 和 伯 努 利 - 拉 普 拉 斯 模型 中 的 , 过 
程 为 什么 称 为 离散 扩散 模型 . 

6. 练习 题 

1. 利用 如 下 概率 的 思想 ([106], 题 27.18), 证 明 斯 特 林 公式 : ml ~ Ули” зет". 
В Sn = Xi 十 … 十 Xn(n > 1), 其 中 Xi, Xo 是 独立 且 服 从 参数 和 = 1 的 泊 松 分 
布 的 随机 变量 . 依次 证 明 : 














Sn —n а п К\п ntt 
0 
(b) Law П) 一 Law [N7], 

其 中 N 是 正 态 分 布 的 随机 变量 ; 
Sn —n\)- Sesi 
©) ($7) -av = ут 
(d) n! ~ Ули" еп, 


2. 证 明 马 尔 可 夫 性 (28) 式 . 

3. 证 明 (30) 式 . 

4. 证 明 埃 伦 弗 斯 特 模型 中 马尔 可 夫 链 的 所 有 状态 都 是 常 返 的 . 
5. 验证 (31) 式 和 (32) 式 的 正确 性 . 


89. 马尔 可 夫 链 的 最 优 停 时 问题 


1. 这 一 节 的 基本 内 容 。 下面 讨论 的 内 容 , 与 第 七 章 813 紧密 衔接 , 这 部 分 阐述 
任意 随机 序列 的 、 最 优 停 时 问题 求解 的 “ 软 "” 方法 . 这 一 节 的 基本 内 容 , 涉及 由 马尔 
可 夫 链 之 状态 的 函数 产生 的 随机 序列 , 可 以 赋予 第 七 章 813 的 结果 简单 而 直观 的 形 
式 和 解释 . 

2. 一 步 转移 算 子 假设 X = (Xn F n P) ВАНН (Е,8) 的 、 离 散 时 
间 齐 次 马尔 可 夫 链 . 

亦 假设 (Q, F) 是 坐标 空间 (Ж. 81 的 第 6 小 节 ), 而 Xn = Xn(w),n > 0 ЖЕ 
ЖЖ (9,9) 上 的 随机 变量 , 并 且 х, = Xn(w) 本 身 是 以 坐标 的 形式 给 定 的 : ШЖ 
ш = (20,21,:::) Е Q, 则 Xn(w) = ть; 这 里 多 НХ о КЕ Я = oUF n), К 
P F n= olto ,Tn),n > 0. 
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Ж 在 “最 优 停止 规则 的 一 般 理 论 中 ”完全 不 要 求 9 是 坐标 空间 . 然而 , 就 是 在 
“一 般 理 论 中 ”仍然 需要 假设 О 是 充分 “丰富 ”的 (PEI [78]). 

对 于 我 们 来 讲 , 假设 “坐标 性 ”可 以 简化 讨论 , 特别 对 于 广义 马尔 可 夫 性 情形 (82 
定理 1), 正 是 在 此 假设 下 进行 的 . 

像 上 一 节 一 样 , 以 P(z; В) 表示 所 考虑 的 链 的 转移 函数 : P(z; В) = Pz{X1 Е 
В},хтє Е,ВєЄ##. 

设 了 是 作用 于 E- 可 测 函 数 f = f(z) 的 一 步 转移 算 子 ， 


THG) = Ве (= порезал), @) 


假设 其 中 Bz|f(z1)| < co,z € Е. (为 简便 计 , 记号 (ТЛ (2) 往往 写成 Tf(z). 在 其 他 
相近 的 情形 下 , 也 采用 类 似 的 约定 .) 

з. 最 优 停 时 ”为 表述 马尔 可 夫 链 X 的 最 优 停 时 问题 , 假设 给 定 某 一 #— 可 测 
实 函数 g = g(z), 满足 条 件 : 也 -lg(zn)| < 0,1 € Е, 1—0 п> 0 (8 0 <п< М, 如 
果 事 先 存在 某 个 “最 后 的 ” ЇН N, 而 且 在 N 之 前 应 得 到 “最 优 解 ”). 

以 эл; 表示 (关于 过 滤 (#„)о<к<м 的 ) 马尔 可 夫 时 间 т = rw) <, 且 在 “ 停 
时 ”集合 {0,1,… ,n} 上 取 值 . 

下 面 的 定理 是 , 第 七 章 813 中 定理 1 和 定理 2 的 “马尔 可 夫 ” 提 法 . 

定理 1 设 对 于 0<n<N гє Е, (Ж) 值 "为 





sn(T) = sup Ezg(X7), (2) 
TEM; 
其 中 E 表示 对 测度 Р. KEH. 
假设 
т = min{0 Ş k S n : Sn-k(Xk) = 0(Хь)}, (3) 
而 
Q@o(z) = шах{д(т),То(т)}. (4) 


ЖА, 下 面 的 命题 成 立 ， 
1) 时 间 АХ mg PERRI: 对 于 一 切 工 E Е, 


Е.0(Х,;) = 8, (2). (5) 
2) 函数 sn(z) 可 以 按 如 下 公式 来 求 : 
sn(7) = @"9(т), тєЕ, (6) 


RPF п = 0,09%(2) = 9(т). . 
3) 函数 з„(т)(п < №) АЖ Ж Ж Х (зо(т) = 9(т)): 


5, (2) = шах{9(т), Т5и-1(т)}, ЕЕ, 1<n<N. (7) 
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证 明 将 第 七 章 813 定理 1 和 2 的 结果 , 用 于 函数 f= g(Xn),0<n<N. 
为 此 固定 某 个 “初始 ”状态 т є Е, 并 且 考 虑 上 面 提 到 的 513 中 引进 的 函数 VN 
和 „у. 这 时 , 为 强调 与 初始 状态 有 关 , 我 们 特别 使 用 记号 VN = VN (х). 这 样 ， 


Va (ж) = вир Е.9(Х.), (8) 














其 中 m 表示 (关于 过 滤 (Fren №) 所 有 马尔 可 夫 时 间 т = rw) Ж, 且 在 “ 停 
时 ”集合 {n,n + 1,…… , N} 上 取 值 . у 
由 于 第 七 章 513 的 (6) R, 函数 v 决定 于 如 下 递 推 公式 : 


vN = 9(Хм), ой = шах [g(Xn), В. п). (9) 
由 于 广义 马尔 可 夫 性 ($2 定理 1), (Р, - a.c.) 有 
Es(vNIF м-1) = Br(g(XN)|F Nw-1) = Ехн_,9(Х1), (10) 


其 中 Ex、,g(X1) 应 作 如 下 理解 ( 见 52): WAM (2) = Ezg(X1), ШЇ (т) = (Т9)(=), 
而 根据 定义 认为 
Ех, _,9(Х1) = V(XN-1) = (Т9)(Хм-1)- 
这 样 , ой = 9(Хм), 而 

м1 = maxlg( XN-1), (Т9)(Хм-1)] = (09)(Хх-а). (11) 

类 似 地 继续 推导 , 可 见 对 于 任意 0<n< N 一 1, 有 
vn = (Q "9g)(Xn), (12) 
特别 
vw = (Q™9)(Xo) = (Q™g)(2), (Pz 一 ac 小 


根据 第 七 章 813 的 (13) R, v = М. НР ИХ = Ит) = sw(z)， 可 见 
зм(х) = (QNg)(z). ЕЯ, 对 于 n= № 就 证 明了 (6) А. 类 似 地 , 对 于 n <N 可 以 证 
明 (6) 式 . 

由 (6) 式 和 算 子 Q 的 定义 可 得 (7) R. 

现在 证 明 , 当 n = N 时 , 由 (3) 式 定义 的 停 时 ту 在 类 олу HERR. 同样 ， 
对 于 nm < №, тр 在 类 оло 中 也 是 最 优 的 . 

根据 第 七 章 813 的 定理 1, 最 优 停 时 为 


т = min{0 <k < М: vf = (Хк). 
由 (12) 式 以 及 上 面 证 明 的 事实 : 对 于 任意 n > 0,5 (х) = (Q"g)(z), TA 


р = (9-9) (ХЬ) = зм-к(Хь), (13) 
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从 而 、 
т = min{0 < k < М: зу (Хь) = 9(Хь)}. (14) 
于 是 , 停 时 ту 在 类 олу 中 的 最 优 性 得 证 . 口 
а. 停止 区 域 和 继续 观测 区 域 за 
DN = {ze 巨 :sw_k(z) = б(т)}. (15) 
Ch =E\D = {тє Е:зм-к(т) > 9(1)}. (16) 


那么 , 由 (14) 式 , 可 见 
т (w) = min{0 < k < М: Хро) єр}, (17) 
而 与 第 七 章 813 的 第 6 小 节 引进 的 、 О 中 的 集合 DN 和 CA Жи, 集合 


русрүс...сру=Е, (18) 
суў осу о... осу =, (19) 


可 以 相应 地 称 为 Е 中 的 “停止 ”区域 和 “继续 ”观测 区 域 . 

我 们 指出 , 所 讨论 的 马尔 可 夫 链 的 最 优 停 时 问题 的 特点 ， 与 一 般 情 形 不 同 , 在 
马尔 可 夫 链 的 情形 下 , 对 “停止 观测 还 是 继续 观测 ”问题 的 回答 , 决定 于 马尔 可 夫 链 
本 身 的 状态 (7000) = min{0 < k < N : Xk(w) € DNJ), 换 句 话说 , 决定 于 游 动 的 
“质点 ”所 处 的 位 置 . 这 时 ， 从 原则 的 观点 出 发 ,最 优 停 时 间 题 的 完全 解决 ( 即 描绘 
“( 价 ) 值 ”sw(z) 和 最 优 停 时 с), 在 于 从 递 推 “动态 规划 方程 ”(7) 式 依次 寻找 函 
数 so(z) = g(z),si(z)，…,sN(z). 

5. 类 олсо 中 的 最 优 停 时 Я оле 是 一 切 有 限 马尔 可 夫 停 时 类 . 现在 , 在 假设 
TEMP 的 条 件 下 , 讨论 最 优 停 时 问题 .( 对 于 所 有 we О, Ч remy 时 , Е т < Ni 
Ж тє M8? 时 , И] т = т(ш) < оо.) 

这 样 , 假设 “( 价 ) 值 ” 

s(z) = sup Е,9(Х,). (20) 
тєл 


为 使 这 里 不 出 现 数学 期 望 E.g(X;) 的 存在 性 问题 , 例如 可 以 假设 
Е. е) <œ, тєЄЁ. (21) 


显然 , 这 样 以 来 , 该 式 一 定 成 立 , 如 果 函 数 g = g(z) R (lg(z)| < C,z € Е); 特别 ， 
如 果 链 的 状态 空间 有 限 , 则 条 件 (21) 成 立 . 
由 “( 价 ) 值 ”sw(z) 和 s(z) 的 定义 , 可 见 对 于 一 切 re E, 有 


SN(T) < эмх) < ++ < (т). (22) 
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自然, 应 想到 lim sw(z) 等 于 s(z). 而 假如 是 这 样 , 则 在 (т) 式 中 求 极限 , 将 要 得 到 
的 “( 价 ) 值 ” s 50) ) 应 满足 方程 : 


s(x) = max{g(z), Ts(z)}, тєЕ. (23) 
顺便 指出 , 由 该 方程 可 见 , 对 于 s(z),z є Е, 有 “ 变 分 不 等 式 ”: 


(г) > (т), (24) 
s(2) > Тво). _ (25) 


不 等 式 (24) 说 明 ,“( 价 ) 值 ” s(z) 是 g(z) 的 控制 函数 . 第 二 个 不 等 式 (25) 说 明 , R 
据 马 尔 可 夫 过 程 一 般 理 论 的 定义 , 函数 s(z) 是 峰 态 的 或 上 调和 的 . 
这 样 , 假如 可 以 证 明 函数 s(z) 满足 (23) R, 则 可 以 得 出 结论 ,“( 价 ) 值 ”s(z) 是 
glr) ЖОЖ 
我 们 现在 指出 如 下 情形 . 假如 某 一 函数 v(z) 是 函数 g(z) 峰 态 强 函 数 , 那么 显然 
有 “ 变 分 不 等 式 ”: 
v(x) > max{g(z),Tu(z)}， тЕЕ. (26) 
结果 表明 , 如 果 补充 假设 , 函数 utz) ERES R, 则 在 (26) 式 中 将 
是 等 式 , 即 (т) 满足 方程 : 


v(x) = тах{9(х), То(х)}, тЕЕ. (27) 


引 理 1 EA glr) 的 任何 最 小 峰 态 强 函数 v(T), 都 满足 方程 (27). 
证 明 证 明 相当 简单 . 显然 v(z) 满足 不 等 式 (26). За vi(z) = max{g(z),Tv(z)}. 
由 于 w(z) > g(z) 和 w(z) < wv(z), 可 见 


Tui(z) < Tu(z) < max{g(z),Tu(z)} = (т). 


从 而 w(z) Ж g(z) 的 峰 态 强 函 数 . 由 于 v(z) 是 最 小 峰 态 强 函 数 , W vle) < v(x), BI 
u(z) < maxfg(z),Tu(z)}. FÆ, 这 连同 不 等 式 (26) 就 证 明了 等 式 (27). 口 
所 进行 的 基于 假设 s(z) = im sN(z) 的 预先 讨论 , 并 且 导 出 了 (23) R, URII 
理 1 的 命题 提示 表征 “( 价 ) 值 ” в, 看 来 s(z) 是 函数 g(z) 的 最 小 峰 态 强 函 数 . 
而 事实 上 确 有 下 面 的 定理 . 
定理 2 HAX g= g(r) 满足 条 件 (21): 





Е, Горло, <œ, TEE. 
n 


ЖА, 下列 各 命题 成 立 : 
(а) 价值 s(z) 是 函数 g(7) 的 最 小 峰 态 强 函 数 . 
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(b) 价值 s(z) 等 于 im sv(7) = йш 9%9(2), 并 且 满 足 “瓦尔 德 - NAE (А. 
Wald - В. Е. Bellman) 动态 规划 方程 ” 


s(x) = тах{9(т), Ts(7)}, ТЕЕ. 


(c) 如 果 
Е, [арх] <%, TEE, 


则 对 于 每 一 个 = > 0, 停 时 
T=inf{n20:s(Xn) < g(Xn) +€} 
ARME фе ЖИ, № 
8(1) -=Е<Е.9(Х.;), тє E. 
%ЖР, (14 < оо} = 1,26 Е, N) т) 是 最 优 的 (0- 最 优 的 ). 即 
s(7) = Erg(Xr:), ЕЕ. (28) 


(4) 如 果 集 合 ERIR, 则 停 时 т; АТ Оле, 并且 是 最 优 的 . 

注 完全 可 能 , 对 于 某 个 状态 z € Е, ЁШ ту = inf{n > 0: s(Xn) = g(Xn)} 以 
正 概率 等 于 +оо,Р,{т} = оо} > 0. (甚至 有 可 能 对 于 可 数 个 状态 出 现 这 样 的 情形 ; 
练习 题 1.) 因而 , 需要 约定 , 在 “ 值 Xx” 无 定义 的 情况 下 , 应 如 何 理解 “ 停 时 7 取 
+оо 为 值 ”. 

常规 定 g(X<) = ао) ( 见 第 七 章 13 第 1 小 节 ; 亦 见 [78] ) 还 有 其 他 可 能 
的 解决 办 法 : 用 gX I(r < оо) 代替 g(X;). ЖА, WRA M 表示 一 切 马尔 可 夫 
时 间 类 , 其 中 有 可 能 包含 取 +0 为 值 者 , 则 “( 价 ) 值 ” 


3(т) = зир Е.9(Х,) (т < ©) (29) 
тех х 
有 定义 . 从 而 , 就 可 以 在 类 Mo 中 讨论 最 优 停 时 问题 . 
定理 2 的 证 明 我 们 仅 对 于 有 限 集合 Е 进行 证 明 . 这 种 情形 比较 简单 , 而 且 可 
以 很 好 地 在 最 优 停 时 问题 中 显示 峰 态 函数 的 产生 . 关于 一 般 情形 的 证 明 , 参见 [73], 
[102]. 
(а) WEH s(z) 是 峰 态 函数 , 即 s(z) > Тз(т), те Е. 
显然 , 对 于 每 一 个 状态 ye Е 和。 > 0, 存在 (一 般 依赖 于 => 0 的) (P-a. с.) 
有 限 的 停 时 т, < mg, 使 
Eyg(X7,) > (у) — =. (30) 
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根据 这 一 停 时 mm,y є Е, 建立 一 新 停 时 7: 形象 地 说 , 使 之 决定 下 一 步 选择 “ 停 时 ” 
的 “策略”. 

假设 开始 时 “质点 ”位 于 状态 E.“ 质 点 ”在 此 状态 不 会 “去 留 ”, 然而 却 实现 了 
一 次 观测 . 设 在 时 刻 п = 1,“ 质 点 ”处 于 状态 ye Е. ЖА, Н? RER “Жи” 在 
于 , 认为 “质点 的 生命 ”仿佛 重新 开始 , 而 决定 其 停止 的 规则 , 由 停 时 т, 控制 . 

而 停 时 7 形式 上 由 如 下 方式 决定 . 

设 ye Е. 考虑 事件 {w : туо) = n},n > 0. 由 于 т, 是 马尔 可 夫 时 间 , 则 
该 事件 属于 Fn 假设 О 是 由 序列 w = (zo,zi,……),zi є Е, 生成 的 坐标 空间 ， 
而 Я, = о(ш : rzo……,znj,z € Е. 由 此 可 见 , 集合 {w : nw) = п} 可 以 写成 
{w : (Xo(w),… ,Xn(w)) Е By(n)}, 其 中 Byin) Ж E" =#®...®8& (n+1 个 多 ) 
中 的 某 个 集合 . ( 亦 见 第 二 章 82 的 定理 4.) 

停 时 地 = Pw) 是 这 样 定义 的 , АНИ п + (п > 0), 这 时 , 在 集合 


Ân = Уо: Хш) = у, (ХЦ), „Хи € Ву(п)} 


УЕЕ 


+, Pw) =n +1. (直观 上 , 关于 停 时 т 可 以 作 如 下 说 明 : 对 于 任何 状态 r, 在 时 刻 
п = 0 肯定 进行 观测 ; 假如 这 时 Xi = у, 则 下 一 步 使 用 停 时 т,.) 

由 于 >, Д, = 0, WER F= (ш) 确实 对 于 一 切 we Q 定义 , 并 且 是 马尔 可 夫 
的 (练习 是 2. 

由 此 构造 , 广义 马尔 可 夫 性 (82 中 (2) 式 ) 和 (30) RTA, 对 任意 re E, 有 


Е, 9(Х,) = У УУР. {Хх = (Ху, s Xn41) € By(n), Хан = 2}9(2) 


п>20уЕЕ ЕЕ 

= У У У рр, Хо = у, (Xo, , Xn) Е By(n), Xn = 2}9(2) 
n>0vEE ЕЕ 

= УУ у рәъРь{(Хо,---,Х„) € Вип), Xn = =}9(2) 
п>ОуЕЕ 2ЕЕ 

= У р.,Е,9(Х,,) > 》 ргу[з(у) -Ё Ts(y) – є. 
УЄЕ УЄЕ + 


这 样 ， 
s(x) = Е.9(Хғ) > Тз(у) – =, ЕЕ, 
而 由 于 => 0 的 任意 性 , 有 


s(x) > Тз(т), ТЕБЕ, 


因此 函数 s = s(1), x € Е 的 峰 态 性 得 证 . 
由 上 面 证 明 的 峰 态 性 (上 调和 性 ), 立即 可 以 得 到 下 面 的 重要 结果 
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系 1 PEE EE, 过 程 (序列 ) 
s = (s(Xn))n>0 (31) 


(关于 Pz - 概率 ) ЖЕ. 
将 由 第 七 章 82 的 定理 1 ИЖЕ, 可 见 对 于 任意 停 时 > є Эле, 有 如 下 不 等 

式 : 
s(x) >Е{5(Х,), тЕЁЕ, (32) 


而 且 , 如 果 对 于 中 的 两 个 马尔 可 夫 停 时 o 和 т, Но < т(Р, -ace E Б), Д] 
Ess(Xo) > Е,5(Х,), тЕЕ. (33) 


(注意 , 由 于 空间 EAR, 故 对 于 所 考虑 的 情形 , 上 述 第 七 章 82 定理 1 的 所 有 条 件 都 
成 立 ). 

由 (32) 式 , 得 

系 2 假设 对 于 (20) 式 的 最 优 停 时 问题 , 函数 g = g(z),ZE E, LESH (LP 
的 ). 那么 , 个 时 大 三 0 是 最 优 停 时 . 

(b) 证 明 s(z) = lim зм(т),тЕ E. 

因为 sw(z) < sw+i(z), 所 以 极限 lim sn(z) 存 在 ， 记 作 з(х). 由 于 E AR, 且 对 
于 sn(z)(N > 0), 有 递 推 关系 式 ， 


зм(2) = max{g(7), Tsn-1(7)}, 
则 当 № 一 co 时 求 极限 , 得 
З(ж) = шах{д(т), ТЗ(т)}. 


由 此 可 见 , stz) 是 函数 g(z) 的 峰 态 强 函 数 . 但 是 , 由 于 5(z) 是 最 小 峰 态 强 函数 , 可 
见 (2) < 5(z). 此 外 , 由 于 对 任意 М > 0, 显然 sn(z) < s(z), 可 见 5(z) < в(т). 
这 样 s(z) = s(z), 从 而 证 明了 和 欲 证 的 定理 2 的 命题 (b). 
(c,d) 证 明 命题 (с) 和 (а). 最 后 , 证 明 停 时 


T= inf{n > 0 : s(Xn) = g(Xn))}, (34) 
Bp 

т] = inf{n > 0: Xn € D*}, (35) 
жж ( 停 时 ) 集合 

D* = {тє Е:з(т) = 9(2)} (36) 


的 时 间 , (在 集合 E 有 限 的 情形 下 ) 在 类 эле 中 是 最 优 的 . 
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为 此 , 首先 注意 到 , 由 于 满足 g(3) = max 9(7) 的 肯定 属于 DD*, 可 见 р" 不 空 . 
由 于 在 状态 T 下 s(x) = 92), 则 显然 在 最 优 策略 应 该 是 : 在 状态 т 下 立刻 “停止 ”. 
也 正 是 这 一 点 决定 了 停 时 т. 
为 从 类 оле 中 最 优 的 角度 考虑 停 时 ту, 首先 需要 断定 此 时 间 то 属于 类 MG, 
即 
Р,{тр < оо} =1тЕР. (37) 


由 所 作 关 于 状态 集合 E 有 限 性 假设 , 确实 可 以 证 明 这 一 点 . (对 于 状态 集合 Е ТЖ 
的 情形 , 一 般 已 经 不 是 这 样 ; 练习 题 1). 
为 了 证 明 上 述 事实 , 我 们 指出 , 我 们 感 兴趣 的 事件 {т} = со} 等 于 事件 


A= Цих, #0"). 
п>0 
这 样 , 需要 证 明 对 于 一 切 re Е, 有 Р.(А) = 0. 
如 果 D* = Е, 则 这 显然 . 
Я D* 关 已 由 于 集合 Е 有 限 性 , 存在 a > 0, 使 对 于 一 切 у є E\D*,g(y) < 
8(у) -а. 
那么 , 对 于 任意 тех, 有 


оо 


Е.9(Х,) = УУР, (т=п, Xn = у}д(у) 


п=буЕЕ 

= У Ури Xa =u) +) У) Рт =n Xn = у) 
п=0 уєр" п=0 ує Е\р* 

«УУ Pair nA =y) + У У) Р.т =n, Xn =) -al 
n=0vED* n=0vEE\D* 

<S Ers(Xr) — aPz(A) < s(z) – aPz(4)， (38) 


其 中 最 后 一 个 不 等 式 , 由 函数 s(z) 的 峰 态 性 (К), 以 及 对 其 成 立 的 不 等 式 (32) 
得 到 . 在 (38) 式 左 侧 对 т є эле 取 上 确 界 , 得 不 等 式 


s(x) < (х) - aPz(4)， ze 五. 


但 是 |s(z)| < coa > 0. 因此 P-(4) = 0,z € Е, 从 而 就 证 明了 停 时 ту 的 有 限 性 . 
现在 证 明 停 时 ту 在 类 олоо 中 的 最 优 性 . 
根据 д 的 定义 
s(Xr;) = 9( Хз), (39) 
鉴于 这 一 性 质 , 我 们 考虑 函数 y(z) = Е.0(Х.;) = Е.5(Х.;). ТРЕЕ 
7(z) 
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1) 是 峰 态 的 ; 

2) 控制 函数 g(z) : g(z) < Y(z),z € Е; 

3) у(х) < (т), 
其 中 最 后 一 个 不 等 式 显然 . 

由 1) 和 2) TA, y(z) 控 制 函数 s(z), 同时 又 是 函数 g(z) 的 最 小 峰 态 强 函数 . 
此 , 由 3) Я М, y(x) = s(z),z € Е, 从 而 


s(z) = Е. 9(Х‚;), тєЕ 
由 此 可 证 ту 在 类 mge 中 的 最 优 性 . 
现在 来 证 性 质 1) ат = inffn > 1 : Xn є D*}， 该 时 刻 是 马尔 可 夫 停 时 ， 
тё SF, TEMY, 由 于 函数 s(x) 是 峰 态 的 , 故 由 性 质 (33) 得 
Е.5(Хғ) < Е,5(Х,;), T € Е, (40) 


此 外 , 由 于 广义 马尔 可 夫 性 ( 见 $2 定理 1 的 (2) R), 可 见 


Bss(X7) = У 5 Pe {Xi £ D", Ха #0", Ха = у}з(у) 
п=1 уєр* 


Е 
= У У У)р.Р.{Хо# D", ,Ха-2 € D°, Xn-1 = у}з(у) 
п=1 уЕ0* гє Е 


=} ргЕ:з(Ху;). (41) 
2ЕЕ 


因此 , 由 (40) 式 , 可 见 
Ezs(Xr;) > 》 рег: (Хз), 
26Е 


即 
(х) > Dpz:7(z), TEE, 
гЄЕ 

这 就 证 明了 函数 的 Y(z) 峰 态 性 . 

只 剩 下 证 明 函数 y(z) 是 g(z) 的 强 函 数 . 

WR ze 了 D*, 则 着 =0, 且 显然 Y(z) = Е.9(Х,;) = (х). 

考虑 集合 Е\р*, 并 且 设 Es = {т € E\D* : у(х) < 9(т)}. 这 一 集合 ВБ 是 有 限 
№. 设 25 是 函数 g(z) — (2) 在 集合 Е; БЕКА A: 


9025) – 1095) = паки) - (©). 
引进 一 新 函数 


Hz) = у(х) + [g(zi) — (25), z€ E. (42) 
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该 函数 (作为 峰 态 函数 与 常数 之 和 ) 显然 是 峰 态 的 , 并 且 对 于 一 切 > e Е, 
(2) — g(x) = [9(26) — 7(20)] — [0(®) — 7(2)] > 0. 


这 样 , 函数 3(z) Ж g(z) 的 峰 态 强 函数 . 由 于 函数 s(z) 是 g(z) 的 最 小 峰 态 强 函 数 ， 
H F(x) > s(x). 
由 此 可 见 ， 


3(zi) > з(т). 


但 是 , 由 于 根据 (42) R 3(zi) = g(zi), 故 (т) > s(a). 因为 对 于 一 切 ze Е,з(т) > 
glz), 所 以 (т) = s(x), 说 明 点 zi 属于 集合 D*. 然而 , 根据 假设 ri є E\D*. 

所 得 矛盾 说 明 集合 E\D* = о. 由 此 可 见 , 对 于 一 切 ze Е, (т) > (т). 口 

в. 例 现在 举 几 个 例子 . 

例 1 考虑 88 例 5 中 描绘 的 、 具 有 两 个 “吸收 ” 状态 0 和 м 的 简单 随机 游 
动 . 这 时 , 我 们 假设 p = q = 1/2 (对 称 游 动 ). 对 于 所 考虑 的 随机 游 动 , 如 果 函 数 
у(х), тє E = {0,1,… ,NN}, 是 峰 态 的 , 则 对 于 一 切 z =1,…,N 一 1 有 


мба) > Бае 0) ++. (43) 


设 给 定 一 函数 g = о(т), с є {0,1,… N} 由 于 0 和 N 是 吸收 状态 可 见 , 应 当 
在 满足 条 件 (43) 和 边界 条 件 Y(0) = g(0),Y(N) = g(N) 的 所 有 函数 Y(z) 中 求 函数 
s(x). 

条 件 (43) 表示 函数 Y(z) (在 集合 {1,2,… N - 1} 上 ) 的 凸 性 . 因此 , 可 以 得 出 
如 下 结论 : 在 该 问题 中 ,“( 价 ) 值 ”s(z), 其 中 


з(т) = вир Е.9(Х,) 
тєл 


是 最 小 凸 函 数 , 满足 边界 条 件 Y(0) = 9(0), (N) = (N). 直观 上 , 为 求 函数 s(z) 的 
值 , 需要 按 如 下 方式 进行 . 在 函数 g(z) 的 值 上 “ 栓 ” Е ЧАН». 在 图 42“ 崩 紧 
的 线 " 通过 (0,a),(1,b,(4,o),(6,d) 4 个 点 , 其 中 0,1,4,6 构成 的 D* RRR, 且 在 这 些 
点 上 s(z) = g(z). 在 其 余 状 态 z = 2,3,5 Е, ER s(z) 的 值 决 定 于 线性 内 插 .“ 同 流 
Я” s(x) 的 值 , 对 于 属于 Е 的 一 切 状态 т, 在 一 般 情形 下 类 似 地 决定 . 








#42 函数 gl) (虚线 ) 及 其 凸 流 形 s(z),z = 0,1,… ‚6. 


| 
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#2 Я 88 中 例 7 和 例 8 一 样 , 考虑 在 状态 集合 = {0,1,…,N} 上 且 在 0 
和 N 是 反射 屏幕 的 、 对 称 (p = а = 1/2) 简单 随机 游 动 . 所 考虑 的 游 动 是 正常 返 的 . 
由 此 可 见 , 在 此 最 优 停 时 问题 中 ， 


s(z)= зир Erg(X7) 
тєлє 


具有 相当 简单 和 自然 的 构造 : 需要 等 到 “函数 g(z) 达到 最 大 值 的 任何 一 个 状态 ”的 
时 刻 , 并 且 在 此 时 刻 停止 观测 . 

例 3 ”假设 对 于 在 集合 Е = {0,1, , N} 上 的 、 简 单 对 称 随机 游 动 , 0 是 吸收 
状态 而 N 是 反射 状态 . 设 zo 是 函数 9(z) 达到 最 大 值 , 而 且 是 游 动 离 N 最 近 的 状 
Ж. ЖА, 最 优 停 时 具有 如 下 形式 : 如 果 zo < z < М, 则 当 (A Pa- 概率 1) 达到 状 
Ж zo 时 游 动 停止. 

如 果 假 设 Е = {0,1,… zo}, 而 хо 是 吸收 状态 , 则 在 状态 0 和 zo 之 间 停 止 问 
题 的 解 与 例 1 一 样 . 

т. 最 优 对 象 的 选择 问题 ”最 后 讨论 有 广泛 知名 度 的 “最 优 对 象 的 选择 问题 亦 
称 “ 选 择 审慎 的 未 婚 女 问题 ",“ 选 秘书 问题 ", ……… (参阅 [59], [78], [102], [106]). 为 
叙述 的 直观 计 , 我 们 选择 “选择 审慎 的 未 婚 女 问题 ”的 形式 . 

假设 “未 婚 女 ” 希望 自 М 个 候选 人 中 选 出 最 好 的 “未 婚 夫 ”. 假设 N 事先 已 知 ， 
并 且 所 有 候选 人 事先 已 经 按 “素质 ”排序 . 为 确定 计 , 假设 序号 最 大 者 , 即 序号 为 N 
者 是 最 优秀 的 , 按 “素质 ” 排 第 二 位 者 的 序号 为 N - 1,…… 最 差 者 序号 为 1. 

候选 “未婚夫 ” 按 随机 的 顺序 会 见 “ 未 婚 女 ", 并 且 按 如 下 方式 实现 . 

设 (anan ,an) 是 1,2,… ,NN 的 排列 . 排列 的 总 数 等 于 Nl, 并 且 假设 它们 都 
是 “随机 ”的 , 即 每 一 个 排列 出 现 的 概率 都 等 于 1/N!. 

在 该 问题 中 , 样本 (a1,a2,… an) 的 有 序 性 在 于 , (在 会 见 全 部 候选 人 的 潜在 可 
能 性 的 情况 下 ) 第 一 个 会 见 “ 未 婚 女 ” 者 是 编号 为 а, 的 候选 人 , 然后 是 a2,…, 最 后 
是 编号 为 an 的 候选 人 . 

加 在 “未 婚 女 ” 可 能 “策略 ” 由 如 下 的 想法 形成 . 

“未 婚 女 ” 并 “不 了 解 ”她 会 见 的 “未 婚 夫 ”候选 人 的 完全 的 素质 . 她 关于 候选 
人 的 全 部 了 解 , 仅仅 是 通过 两 两 比较 的 结果 , 知道 哪个 较 好 或 较 坏 . 

其 次 , 如 果 “ 未 婚 女 ” 拒 绝 了 某 个 “未 婚 夫 ” 候选 人 , 则 他 就 不 再 与 她 会 面 (然而 
被 拒绝 者 实际 上 可 能 是 最 优秀 的 ). 

“未 婚 女 ”的 策略 应 该 是 , 根据 顺序 会 见 候选 人 的 结果 (并 记忆 ; 两 两 比较 的 结果 
并 考虑 “素质 "), 这 样 来 选择 停 时 т", 使 得 


Р{а,. = N} = supP{ar = №}, (44) 


其 中 r 属于 某 一 停 时 类 оле, 而 类 оле 决定 于 由 “未 婚 女 ”在 会 见 “ 未 婚 夫 ”候选 
人 的 过 程 中 得 到 的 “信息 ”. 
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为 更 确切 地 描绘 所 考虑 的 停 时 类 ME, 我 们 根据 序列 w = (a1,42,… ,an) 建立 
“Ж” 序列 X = (X1,X2,…), 该 序列 是 由 上 面 描绘 的 “未 婚 女 ”的 行动 方式 自然 产 
生 的 . 

具体 地 说 , 设 Xi = 1, 并 设 Xs 是 “未 婚 夫 ”的 大 于 以 上 所 有 编号 的 编号 (B 
到 达 的 时 刻 ). 这 样 , 如 果 Х = 3, 则 说 明 对 于 所 讨论 的 序列 w = (aaaa…… ,ov)， 
{Ë а > аз, 而 аз > ai(> аз). 类似 地 继续 定义 Хз, X4,…… 例如 设 Хз = 5. 因而 
аз > a4, 而 а» > аз(> ад). 

最 多 有 NN 个 强 函数 (在 (a1,a2,… зам) = (1,2,.--,№) 的 情形 下 ). 假如 对 于 序 
Fj w = (а1, аз, --- an), 强 函数 的 个 数 等 于 т, 则 设 Хы = Xm+2 = ENL 
所 考虑 的 停 时 类 эле, 由 具有 性 质 


{ш:т(ш)=п}є # 
的 停 时 > = r(w) 构成 ,其 中 罗 =o(X1,… ,Xn),1<ngN. 
现在 比较 详细 地 讨论 “ 秩 ” 序列 X = (Xi, Xa) 的 构造 . 


不 难 证 明 (练习 题 3), 该 序列 是 相 空间 为 E = {1,2,… ,NN +1} 齐 次 马尔 可 夫 
链 . 该 链 的 转移 概率 决定 于 公式 : 





і 
Е, 1<і<ј <А, 45 
Pj = т) j (45) 
i Р 
рми = у, 1<1<№, (46) 
PN+LN+1 = 1. (47) 


由 此 可 见 , N + 1 是 吸收 状态 , 而 且 只 有 沿 集合 “向 上 ”转移 是 可 能 的 , 即 只 
可 能 转移 i 一 j, ЖН. у>. 

Ж 考虑 到 每 一 个 序列 w = (a1,a2,… ,av) 出 现 的 概率 都 等 于 1/N!, 故 可 由 如 
下 简单 地 讨论 得 到 (45) 式 . 

对 于 1<i<j< М, 转移 概率 为 
Р(Х, = i, Хан =} 

Р{Х„ =i} у 

事件 {Xn = i Хуа = Л 表示 ,oj 的 值 在 a1,… ,a; 各 值 中 最 大 的 , 这 时 а, > ai. 
上 述 事件 的 概率 等 于 


P{Xn = i, Xn =j} = 


Pij = P{Xns = ЛХ» =i} = (48) 


G-2!__1 

й 50-1) 
同样 , 事件 (Xn = i) 表示 , a; 的 值 在 a1,… ,ai 各 值 中 是 最 大 的 , 而 事件 {Xn = 计 的 
概率 等 于 








Р{Х, == 
由 这 些 讨论 和 (48) R, 得 (45) R. 


(i=1) 1 
ГЫ 
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为 证 明 (46) R, 只 需 注意 到 , ШЖ Xn = i, W Xn+1 = N +1, 说 明 ai 的 值 在 
а, ,Qi-1 各 值 中 , 以 及 在 oi+1,… ам 中 都 是 最 大 的 . 

最 后 , 公式 (47) 显然 . 

现在 假设 “未婚 女 " 选择 (关于 о 代数 系 (FX) 的 ) 某 一 停 时 т, 并 且 使 X =i. 
那么 , 根据 (46) 式 , 此 时 间 т 结果 是 成 功 的 ( 即 ar = №) 条 件 概率 等 于 Xi/N(= i/N). 
从 而 ， 

P{a, = №} = вт. 
因此 , 求 最 优 停 时 т", 即 求 满足 
Р{а,. = N} = supP{a; = №} 


的 时 间 т”, 归结 为 解 最 优 停 时 问题 
Xr 


K (49) 


У" = supE 
рі 


EP т ЖР о RER (FX) 是 马尔 可 夫 时 间 . 
在 (49) APH Ху = 1. 根据 对 马尔 可 夫 序列 , 求解 最 优 停 时 问题 的 一 般 方法 ， 
记 
v(i) = sup Eig(X7), 
其 中 E; 是 在 Xn = i 的 条 件 下 的 数学 期 望 , Н 
90 =. < №, g(N+1)=0. 


由 定理 2 已 知 , 函数 v(i),1 < i< N +1, 是 函数 g(i),1 < i< N+l 的 峰 态 强 函 数 : 


v(i) > Tv(i) = әз goh (50) 
v(i) > gli), 61) 
并 且 (函数 v(i)) 是 同类 函数 中 最 小 的 . 由 同一 定理 2, 可 见 满足 方程 : 
v(i) = max{g(i), Tv(i)}, 1<i<N+1. (52) 
这 时 , 不 难看 出 , 所 求 函数 v(i) 应 当 满 足 : 
v(N+1)=0, v(N)=g(N)=1. 


以 D* 表示 停止 观测 的 状态 ie Е 的 集合 . 根据 定理 1, 该 集合 可 以 用 如 下 方式 
描绘 : 
D* = {i € E : v(i) = 9(4)}. 
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相应 地 , 继续 观测 的 集合 为 
СЕ {i € E : v(i) > gli)}- 
这 样 , 如 果 ie D*, 则 


N N 
90) = v(i) > Tv(i) = рэ Тр үа РЭ ,0- gg 


N 
= уер DN -® 5 ч 


ј=і+1 
从 而 , ШЖ гєр“, 则 应 该 成 立 不 等 式 : 
м 
<1. 
j=i+1 I-1 


此 外 , 如 果 该 不 等 式 成 立 , 且 值 i+ 1,… ,NN 都 属于 D*, 则 


ох SS ет | 
Tv(i) = р» 0190 - 99 5705-1590 


因而 , 状态 i 也 属于 集合 D. 
由 vw(N) = 9(№), 可 见 N e D*. 因此 , 上 面 的 讨论 说 明 , 集合 D 应 该 有 如 下 形 
式 : 
D* = {0,0 +1,- ,N,N+1), 
其 中 = (М) 决定 于 不 等 式 


1 1 1 1 1 1 
га д < ca 
ptr? +у-—1%%<ре-т** +у-т' (53) 


而 对 于 充分 大 的 N, 由 此 得 





#(№) ~ г. (54) 
事实 上 , 对 于 任意 n>2, 有 


1 
In(n+1)— Inn < = < шп 一 In(n — 1). 





因此 ， 
А —1 
п ЕТ М-1 n-1’ 
由 此 连同 (53) 式 得 不 等 式 


N=-1 
ni <1 < ау 5 у 5 
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于 是 , 由 此 不 等 式 得 渐 近 式 (54). 
现在 对 于 i€ Е = {1,2,… ,NN 十 1}, Ж v = v(i). 
WR i eD = {0,0 +1, N,N +1}, D vli) = gli) =i/N. 
ЖЕ М 


LASN и 
-ysr -)= у =й = у (мы). 

















з= 
#ї=*—2,Ш) 
Щщ —2) = То" - 2) = FE -1)+ 

реа 1 ва 1 
- (тра) + N Эрен 
“-1 1 1 
= (++ мет). 

由 归纳 法 可 得 , 对 于 一 切 1 <i <i*, 有 
vli) = (м) = Z= (== Рн ra) (55) 


从 而 , 对 于 ie {1,2,…,N}, 有 


Јам), ааа), га 
O5 др, ім. a 
注意 到 (55) R, 由 于 
1 1 
фе (утат) = (57) 
则 当 № 一 со 时 
фт (м) = тылы. = 1 ~ 0.0368. (58) 


初 看 来 , 所 得 结果 可 能 有 些 奇怪 , 因为 由 此 可 见 , 如 果 候选 人数 非常 大 , 则 “未 婚 
女 ”以 很 大 的 概率 


У* =вирР{а, = N} = v* (N) ~ 0.368, 
存在 从 他 们 之 中 选择 最 优秀 者 的 策略 . 这 时 , 最 优 停 时 为 


т* = шНп: Xn E€ D*}, 
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Фф D* = {б +1, N,N +1}. 
这 样 ,“ 未 婚 女 ” 最 优 策略 是 , 观察 i* 一 1 个 候选 人 , 其 中 





p =, п — оо, 


然后 , 在 随后 会 见 的 候选 人 中 , 选择 第 一 个 比 以 前 会 见 的 都 优秀 者 . 

E N = 10 的 情形 下 , 较 细致 地 分 析 表 明 (例如 , I [102] 的 第 三 章 81), i*(10) = 4. 
换 句 话说 , 这 时 需要 会 见 3 个 候选 人 , 并 在 随后 会 见 的 候选 人 中 , 选择 选择 第 一 个 比 
前 3 个 都 优秀 者 . 选中 最 优秀 “未 婚 夫 ”相应 的 概率 (ЕП о" (10) 的 值 ) 等 于 0.399. 

8. 练习 题 

1. 举例 说 明 , 对 于 具有 可 数 状 态 集 的 马尔 可 夫 链 , (在 类 эло 中 ) 有 可 能 不 存在 
最 优 停 时 . 

2. 验证 在 定理 2 的 证 明 中 引进 的 时 间 ту, 是 马尔 可 夫 时 间 . 

3. 证 明 在 第 7 小 节 , 讨论 “选择 审慎 的 未 婚 女 问题 ”时 引进 的 序列 X = (X, 
Хо), 是 齐 次 马尔 可 夫 链 . 

4. Ж = (Xn)nzo 是 在 R 中 取 值 的 齐 次 马尔 可 夫 链 , 而 其 转移 函数 为 P = 
Р(х; B),x € R, B € B(R). Ж R- Ў f = f(z),z € R, Æ Р -调和 函数 (RAF Р 
是 调和 函数 ), ШЖ 


Bx) = | Pedy) < о, тє, 


而 
f(z) = 人 f(y)P(z;dy), тєк. (59) 


(如 果 将 (59) 式 中 的 “=” 换 成 “>”, WEM f= f(z) 为 上 调和 函数 ) 

证 明 如 果 /是 上 调和 函数 , 则 对 于 任意 ze R, 序列 (f(Xn))nyo(Xo = z) (关于 
测度 Pa) ЖЕЙ. 

5. 证 明 (38) 式 中 的 停 时 了 属于 类 элү. 

6. 仿照 第 6 小 节 中 的 例 1 对 于 88 的 例 中 的 所 有 简单 随机 游 动 , 考虑 最 优 停 时 
问题 : 

swtz) = sup 了 cg(Xr) 
TEMY 


和 
s(z)= зир Е.9(Х.). 
тєлє 


概率 的 数学 理论 形成 的 简 史 





在 叙述 概率 论 的 历史 问题 时 , 可 以 程式 化 地 分 为 如 下 的 几 个 阶段 (对 照 [26] °, 
[43]): 

史前 

第 一 时 期 (17 世纪 一 18 世纪 初 ) 

第 二 时 期 (18 世纪 一 19 世纪 初 ) 

第 三 时 期 (19 世纪 后 半 叶 ) 

第 四 时 期 (20 世纪 初 和 20 世纪 中 叶 ) 

ФИ. 关于 随机 性 的 直观 印象 ,以 及 关于 可 能 机 会 的 各 种 不 同 的 论断 (涉及 宗教 
祭礼 活动 , 解决 纠纷 , 预测 等 ), 进入 世纪 的 纵深 . 在 前 科学 时 代 , 还 涉及 一 些 人 类 尚 
未 被 认识 的 现象 , 以 及 尚 无 合理 解释 的 现象 , 并 且 只 有 在 几 个 世纪 之 前 才 开始 思考 和 
真正 进行 逻辑 研究 的 现象 . 

考古 资料 表明 , 第 一 个 “随机 工具 ”的 难得 器 件 是 , 很 久 就 被 用 于 原始 ( 极 简单 ) 
的 博弈 的 色 子 (astragalus) *”. 可 以 肯定 地 说 , 在 如 下 一 些 年 代 , 这 样 的 色 子 在 桌 上 
的 博弈 中 已 经 使 用 : 埃及 的 第 一 个 王朝 (大 约 公元 前 3500 年 ), 之 后 在 古 希 腊 和 古 罗 
马 . 众所周知 [20], 罗马 皇帝 奥 古 斯 特 (August, 公元 前 63 年 一 公元 14 年 ), 克 劳 迪 
厄 斯 (Claudius, 公元 前 10 年 一 公元 54 年 ), 曾经 是 古怪 的 色 子 博弈 者 . 

与 博弈 相 联系 , 那 时 已 经 出 现 了 关于 “有 利 结局 ”和 “不 利 结局 ”的 个 数 问题 . 
除 博 弈 之 外 , 在 保险 业 和 商业 中 出 现 了 类 似 的 问题 . 已 知 保险 业 最 早 的 形式 , 是 在 巴 
比 伦 的 记事 中 发 现 的 海运 合同 , 大 致 在 公元 前 4000 年 一 公元 前 3000 年 . 后 来 , 类 

*) 这 一 部 分 的 引文 见 第 воа 一 вов 页 上 文献 索引 . 


**) astragalus 是 一 种 刻 有 点 “o” 的 “ 双 蹄 目 ” 的 骨头 , 其 形状 为 : 外 形 如 正四 棱柱 , 有 4 个 平面， 
上 下 底面 为 球面 . 掷 到 桌面 上 时 , 只 有 其 中 一 个 平面 朝 上 - 
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似 契 约 的 实际 经 腓 尼 基 @ 人 传 给 希腊 人 , 罗马 人 , 印度 人 . 其 踪迹 可 以 在 罗马 文化 的 
早期 法 典 和 拜占庭 帝国 @ 的 法 律 中 找到 . 鉴于 寿命 保险 的 需要 , 罗马 法 学 家 尤 尔 皮 
Ж (Ulpian) 于 (公元 前 220 年 ) 编制 了 第 一 个 死亡 表 . 在 意大利 的 城市 - 共和 国 (F 
马 , 威尼斯 , 热那亚 , 比萨 , 佛罗伦萨 ), 鉴于 保险 的 实际 , 出 现 了 简单 统计 及 实际 核算 
的 必要 性 . 众所周知 , 第 一 份 确切 注 明日 期 的 寿命 保险 的 合同 , 于 1347 年 在 热那亚 
签订 . 

城市 - 共和 国 开创 了 文艺 复兴 时 期 (Renaissance，14 世纪 末 一 17 世纪 
初 ) — 在 西欧 的 改造 和 更 新 时 期 . 看 来 , 正 是 在 意大利 的 文艺 复兴 时 期 ,出现 了 
或 多 或 少 严重 的 争议 , EEE L. 帕 乔 里 (Luca Pacioli, 1445 年 1517 4 (?)), С. Е 
利 卡 尼 尼 (Celio Calcagnini, 1479 年 一 1541 年 ) 和 N. Е. 塔 尔 塔 利 亚 (Nicola Fontana 
Tartaglea, 1500 年 — 1557 年 ) 关于 “概率 ”论断 的 争议 , 基本 上 是 哲学 性 质 的 争议 
( 见 [43], [20]). 

ЖЖ, С. 卡尔 达 诺 (Gerolamo Cardano, 1501 年 -- 1576 Е) 是 最 早 开 始 从 数 
学 上 分 析 博 弈 结局 者 之 一 , 他 是 广为人知 的 “卡尔 达 诺 轴 ” 的 发 明 者 , 并 且 求解 了 3 
次 方程 .他 的 文献 抄本 (大 约 1525 年 ), 只 有 在 1563 年 , 以 “Liber de Ludo Aleæ” 
(《 关 于 博弈 的 书 》) 书 名 才 出 版 , 该 书 并 不 仅仅 是 某 种 赌 徒 的 实际 参考 书 . 在 该 书 
中 最 早 阐述 了 组 合 的 思想 , 利用 组 合 方法 便于 描绘 一 切 可 能 结局 的 集合 (在 不 同 次 
数 地 , 投掷 不 同 特点 的 色 子 时 , 可 能 结局 的 集合 ). С. 卡尔 达 诺 还 发 现 , 对 于 均匀 对 称 
的 色 子 ,“ ‘有 利 组 合 数 ' 与 ' 一 切 可 能 组 合 总 数 ' 的 比值 , 与 博弈 的 实际 十 分 一 致 [20], 

1. 第 一 时 期 (17 世纪 一 18 世纪 初 ) 许多 人 , 例如 , 拉 普 拉 斯 [39] ( 亦 见 [61]) 
把 《概率 演算 》(《 概 率 论 》) 1654 年 登记 与 帕斯卡 (Blaise Pascal,1623 年 一 1662 
年 ) 及 费 马 (Pierre de Fermat, 1601 年 一 1665 年 ) 的 通信 相 联 系 . 通信 与 勋章 获得 者 
de 梅 尔 (Chevalier de Méré, 他 也 是 Antoine Gombaud - 作家 和 道学 先生 , 1607 
年 一 1684 年 ) 给 帕斯卡 提出 的 某 些 问题 有 关 . 

这 些 问 题 之 一 就 是 , 在 中 断 的 博弈 中 , 如 何 公平 地 分 配 赌 注 . 具体 地 说 , 假设 两 
个 选手 4 和 В 约定 , 在 对 弈 中 (例如 , 共 对 弈 5 局 ) 获胜 者 将 得 到 全 部 赌注 . 假设 当 
选手 4 获 4 胜 而 选手 В 获 3 胜 时 , 则 对 弈 强行 停止 . 问 在 此 被 停止 的 对 弈 中 , 选手 
应 按 什么 比例 分 配 赌注 ? 仿佛 该 问题 的 “自然 ”答案 之 一 就 是 , 应 当 按 2 : 1 的 比例 
分 配 赌注 . 实际 上 , 对 弈 经 两 步 肯定 结束 , 这 时 选手 4 只 需 赢 一 局 , 而 选手 в 需要 
赢 两 局 . 由 此 可 见 , 仍 导 致 2: 1 的 比例 . 

然而 , 按 局 数 赢得 对 弈 的 选手 “自然 ” 也 可 以 认为 是 4 : 3. 如 帕斯卡 和 费 马 认 
为 两 个 都 不 是 : 应 当 按 3 : 1 的 比例 分 配 赌注 . 

另 一 个 问题 是 , 哪 一 种 情形 更 有 可 能 : 将 一 枚 均匀 对 称 的 色 子 丘 4 次 , “6 个 点 至 
少 出 现 一 次 ”, 还 是 将 两 枚 均匀 对 称 的 色 子 同时 掷 24 次 , “ 数 偶 (6,6) 至 少 出 现 一 次 ”. 

@ 腓 尼 基 (Phocnicia) 地 中 海 东 岸 的 古国 ， 曾 在 地 中 海 开辟 了 许多 殖民 地 ， 公 元 前 6 世纪 被 波 


斯 征服 ， 公 元 前 332 年 被 马其顿 王朝 亚历山大 占领 . 一 一 译 者 
@ 拜 占 庭 (Byzantium) 帝国 , 亦 称 东 罗 马 帝 国 (公元 4 一 5 世纪 ) 首都 君 士 坦 丁 堡 . 一 一 译 者 
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对 于 上 述 问题 , 帕斯卡 和 费 马 给 出 了 正确 的 答案 : 第 一 种 情形 比 第 二 种 情形 可 能 
性 更 大 . 两 种 情形 的 概率 分 别 等 于 


5\* 35\ 7 
и=1-($) 2 0.516 和 m=1- ($) ~ 0.491. 


在 求解 这 些 问题 时 , 帕斯卡 和 费 马 ( 像 卡尔 达 诺 一 样 ) 广泛 运用 了 组 合 分 析 的 方 
法 . 组 合 分 析 法 , 在 计算 不 同 结局 的 个 数 时 , 成 为 “概率 演算 ”的 基本 方法 之 一 . 较 早 
就 著名 的 帕斯卡 三 角形 @, 在 这 里 也 找到 了 其 “应 用 ”的 位 置 . 

在 1657 年 出 版 了 C. 惠 更 斯 (Christianus Huygens, 1629 年 一 1695 年 ) 的 书 
《De Retiociniis in Lugo Alee》(《 博 弈 中 的 计算 》), 被 认为 是 “概率 演算 ”的 第 一 
部 系统 的 著作 . 书 中 以 明显 的 形式 , 表述 了 许多 基本 概念 , 概率 的 演算 原则 , 引进 了 
概率 的 加 法 法 则 和 乘法 法 则 , 还 包括 关于 数学 期 望 概念 的 讨论 . 在 很 常 时 间 里 , 该 书 
是 《初等 概率 论 》 的 主要 参考 书 . 

所 涉及 的 “概率 论 ” 形 成 时 期 的 核心 代表 人 物 是 ，J. 伯 努 利 (Jacob (Jakob, 
James, Jacques) Benoulli, 1654 年 一 1705 年 ). J. 伯 努 利 的 功勋 在 于 , 他 把 “有 关 所 
考虑 事件 的 可 能 结局 数 ” 与 “可 能 结局 的 总 数 ” 的 比值 , 作为 “事件 概率 ”的 “古典 
型 ”概念 引进 了 科学 . 

3. 伯 努 利 的 与 其 名 字 联 系 在 一 起 的 基本 成 果 , 当然 是 作为 概率 论 一 切 应 用 基础 
的 大 数 定律 . 

J. 伯 努 利于 1713 E, 将 这 一 定律 用 极限 定理 的 正式 形式 , (在 其 侄子 N. 伯 努 
Ў] [Nikolaus Benoulli) 的 参与 下 ) 出 版 了 的 专著 《Ars Conjectandi》(《 假 设 的 艺 
Ж» ), 人 们 把 该 专著 出 版 的 日 期 当 作 大 数 定 律 的 生日 ( 见 [3] 第 9, 27, 75, 83 М). 
像 A. А. 马尔 可 夫 在 纪念 大 数 定律 200 周年 时 的 发 言 中 (I [53],[3]) 指出 的 , 1. 伯 努 
利 在 (1703 年 10 月 3 日 和 1704 年 4 月 20 日 ) 给 G.W. 莱 布 尼 茨 (Gottfried Wilhelm 
Leibniz, 1646 年 一 1716 年 ) 信 中 写 到 , 他 “在 20 年 前 已 经 知道 ”这 个 定理 . (“大 数 
定律 ” 这 一 术语 是 泊 松 1835 年 建议 启用 的 .) 

伯 努 利家 族 的 另 一 名 代表 , 是 D. 伯 努 利 (Daniel Benoulli, 1667 年 一 1748 年 )， 
因为 他 在 概率 论 中 关于 所 谓 “ 彼 得 堡 奇 论 ” 的 争议 而 知名 . 对 于 该 问题 的 解 , 他 使 用 
了 “道德 期 望 " 的 概念 . 

概率 论 形成 的 第 一 个 时 期 , 正 是 数学 科学 建立 的 时 代 . 使 用 诸如 连续 性 , 无 限 大 
和 无 限 小 等 概念 , 正 是 属于 这 个 时 期 . I. 牛顿 (Isaac Newton, 1642 年 一 1727 年 ) 和 
G. W. 莱 布 尼 芯 创建 微分 学 与 积分 学 , 也 是 在 这 个 时 期 . 像 A. Н. 柯 尔 莫 戈 洛 夫 [26] 
指出 的 那样 , 这 个 时 期 的 任务 是 , “理解 研究 因果 关系 的 、 数 学 方法 不 寻常 的 广度 和 
深度 (而 当时 似乎 是 万 能 的 )， 作 为 根据 系统 现在 的 状态 , 唯一 决定 系统 将 来 的 变化 
的 定律 的 微分 方程 的 思想 研究 , 与 现在 相 比 在 数学 科学 中 还 占有 相当 特殊 的 地 位 . 在 


@ 即 杨辉 三 角形 . 杨辉 (中 国 数学 家 , 13 世纪 , 南宋 ), 帕斯卡 (17 世纪 , 法 国 数学 家 ). 一 一 译 者 
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数学 科学 中 , 在 微分 方程 的 确定 性 概 型 不 能 应 用 的 地 方 , 需要 概率 论 . 在 当时 具体 的 
自然 科学 的 资料 , 对 于 计算 和 事物 性 的 应 用 , 尚未 用 到 概率 论 . 

然而 , 对 于 微分 方程 组 一 类 的 确定 性 模型 已 经 十 分 明显 , 引进 实际 现象 的 、 深 
入 的 模式 化 是 不 可 避免 的 . 同样 明显 的 是 , 对 于 无 法 单独 考虑 , 且 相 互 之 间 没 有 关联 
的 大 量 现象 混乱 的 基础 上 , 平均 ” 来 讲 可 能 出 现 完全 清晰 的 规律 性 ”, 这 充分 地 揭示 
T J. 伯 努 利 的 极限 定理 一 一 大 数 定律 的 意义 . 

必须 指出 , 1. 伯 努 利 意识 到 , 考虑 重复 试验 结果 的 无 限 序列 的 重要 性 . 关于 事件 
在 试验 中 出 现 频率 的 极限 性 质 提 法 本 身 , 在 局 限于 初等 算术 和 简单 组 合 方法 的 、 概 
率 论 的 研究 中 曾经 是 新 的 (“ЖЕЙУ”) 思想 . 恰好 是 导致 大 数 定律 的 、 问 题 这 样 的 提 
法 , 不 但 显示 出 ,“ 事 件 出 现 的 概率 ”与 “事件 在 有 限 次 重复 试验 中 出 现 的 频率 ”之 间 
的 差异 , 而 且 显示 出 , 用 试验 次 数 充分 大 时 频率 的 值 , 以 一 定 的 准确 性 确定 事件 概率 
的 可 能 性 . 

2. 第 二 时 期 (18 世纪 一 19 世纪 初 ) 这 个 时 期 主要 有 这 样 一 些 代表 人 物 : 
р. В. 蒙特 莫 尔 特 (Pierre-Remond de Montmort, 1678 年 — 1719 年 ) Dé. RAJ 
(Abraham Dé Moivre, 1667 年 一 1754 年 ), Т. 贝 叶 斯 (Thomas Bayes, 1702 年 - 
1761 年 ); Р. S. 拉 普 拉 斯 (Pierre Simon de Laplace, 1749 年 一 1827 年 ), С. F. 高 斯 
(Сагі Friedrich Gauss, 1777 年 一 1855 年 ); 5. D. 泊 松 (Siméon Denis Poisson, 1781 
年 — 1840 年 ). 

如 果 说 第 一 时 期 实质 上 带 有 哲学 的 特点 , 那么 在 第 二 时 期 是 发 展 和 分 析 方 法 的 
精练 . 在 各 种 不 同 领域 出 现 了 进行 计算 的 必要 性 , 将 概率 统计 方法 用 于 观测 误差 理 
论 , 射击 理论 等 . 

蒙特 莫 尔 特 , 以 及 棣 莫 弗 受到 1. 伯 努 利 在 “概率 的 演算 ”工作 的 强烈 影响 . Ж 
特 莫 尔 特 在 他 的 书 《Essai d’ Analyse sur les jeux de Hasard》(《 随 机 博弈 试验 分 
析 》, 1708 年 ) 中 , 重点 就 是 不 同 博弈 中 核算 方法 的 展开 . 

棣 莫 弗 在 他 的 两 部 书 中 :《Doctrine of Chances》(《 偶 然 性 的 理论 》; 1718 4), 

(Miscellanea Analytica Supplementum》(《 分 析 方 法 》 或 《分 析 混合 体 》, 1730 E), 
相当 详细 地 给 出 了 如 下 一 些 定义 : 事件 的 独立 性 , 期 望 , 条 件 概率 . 

棣 莫 弗 最 著名 的 是 二 项 分 布 的 正 态 逼 近 . 假如 说 伯 努 利 大 数 定律 , 是 频率 在 多 方 
面 “平均 ” 服从 某 种 明显 的 规律 性 ( 按 收敛 的 形式 , 事件 出 现 的 频率 在 一 定 意义 上 收 
敛 于 其 概率 ), 那么 棣 莫 弗 发 现 的 正 态 逼 近 , 揭示 了 关于 偏差 对 平均 水 平 性 质 的 另 一 
种 广泛 的 规律 性 . 棣 莫 弗 的 结果 及 其 后 来 的 推广 是 如 此 地 卓著 , 使 得 人 们 把 “积分 极 
限定 理 ” 称 为 概率 论 的 中 心 极限 定理 .( 使 用 这 一 术语 , Ж С. 波 利 亚 (George Pólya, 
1887 年 — 1985 年 ) 1920 年 建议 的 , [55].) 

在 所 涉及 的 时 期 , 最 著名 的 无 疑 是 拉 普 拉 斯 . 他 在 1812 年 出 版 的 专著 《Théorie 
Analytique des Probabilités》(《 概 率 的 分 析 理 论 》), 是 19 世纪 概率 论 的 主要 参考 
书 . 除 天 文学 和 数学 分 析 方面 的 工作 之 外 , 他 还 撰写 了 若干 关于 概率 演算 的 基础 , 哲 
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学 问题 和 具体 问题 的 论文 . 拉 普 拉 斯 在 误差 理论 方面 的 贡献 卓著 . 具体 地 说 , 在 误 
差 理 论 中 引进 正 态 律 自 然 的 思想 属于 他 和 高 斯 , 正 态 律 是 大 量 独 立 的 、 最 简单 的 误 
差 登 加 的 总 效应 而 产生 的 结果 . 拉 普 拉 斯 不 仅 给 棣 莫 弗 积分 定理 以 更 加 一 般 的 提 法 
(НЕ ЯБ - 拉 普 拉 斯 定理 "), 并 且 提出 了 新 的 分 析 证 明 . 

继 J 伯 努 利之 后 , 在 有 限 个 可 能 结局 的 情形 下 , 拉 普 拉 斯 明确 地 依照 导致 概率 
概念 的 “古典 型 ”定义 的 、“ 等 可 能 性 原则 ”或 “无 差异 原则 ”. 

然而 , 在 这 一 时 期 就 已 经 出 现 了 , 不 能 置 于 古典 概 型 中 的 ,“ 非 古典 型 ”概率 分 
Ж. 例如 , 出 现 了 正 态 分 布 和 泊 松 分 布 . 不 过 , 这 两 个 分 布 长 时 间 仅 仅 被 视 为 某 种 逼 
Ж, 而 不 是 ( 像 现代 对 术语 的 理解 ) 看 成 概率 分 布 . 

另 一 个 “ 非 古典 型 ”分 布 的 例子 , 就 是 “几何 概率 的 ”问题 (例如 , 见 牛顿 1665 
年 , [52] 的 р.60). 这 里 还 有 著名 的 “ 薄 丰 针 ” 问 题 . 与 贝 叶 斯 公式 相 联 系 , 亦 出 现 了 不 
同 的 概率 . 贝 叶 斯 公式 发 表 在 1763 年 的 论文 “An Essay Towards Solving a Problem 
in the Doctrine of Chances” 中 , 在 试验 出 现 了 某 一 事件 的 情况 下 , 该 公式 给 出 了 重 
新 计算 先 验 概率 的 规则 ( 贝 叶 斯 认为 两 个 概率 是 相同 的 ) . 由 该 公式 在 统计 学 中 产 
生 了 一 个 完整 研究 方向 , 如 今 称 为 “ 贝 叶 斯 方法 ”. 

综 上 所 述 可 见 , 在 概率 论 的 “古典 型 ”( 有 限 ) 框架 内 本 质 上 制约 了 其 发 展 和 应 
用 的 可 能 性 , 而 对 于 正 态 分 布 , 泊 松 分 布 , 以 及 其 他 分 布 的 解释 只 能 局 限于 某 种 极限 
形式 , 因而 产生 一 种 不 完善 的 感觉 ， 在 这 个 时 期 , 在 概率 论 中 缺乏 抽象 的 数学 概念 ， 
而 且 它 还 没有 被 当 作 应 用 数学 . 况且 , 其 方法 还 局 限 在 (诸如 , 赌博 , 误差 理论 , 射击 
理论 , 保险 , 人 口 学 ……… ) 的 具体 应 用 . 

з. 第 三 时 期 (19 世纪 后 半 叶 ) ”在 这 个 时 期 , 彼得 堡 占据 了 概率 论 一 般 问 题 的 
基本 位 置 : П. Л. 切 比 雪夫 (П. Л. Чебышёв, 亦 译 “ 切 贝 绍 夫 ”, 1821 年 一 1894 年 )， 
А.А. 马尔 可 夫 (А. А. Марков, 1856 年 一 1922 年 ), 和 А. М. 李 雅 普 诺 夫 (А. М. 
Ляпунов , 1857 年 一 1918 年 ), 在 概率 论 的 整个 系统 的 扩展 和 深入 方面 , 作 了 重要 
贡献 . 具体 地 说 , 由 于 他 们 的 工作 , 突破 了 “古典 型 ”概率 的 机 会 的 框架 . 切 比 雪夫 
非常 明确 地 评价 了 随机 变量 的 概念 , 数学 期 望 的 概念 的 作用 , 并 且 有 效 地 演示 了 这 
些 观念 的 适用 性 , 当然 这 些 在 现在 看 来 都 是 很 平常 的 . 

大 数 定律 , 棣 莫 弗 - 拉 普 拉 斯 定理 涉及 仅 有 两 个 可 能 值 的 随机 变量 . П. Л. 切 比 
雪夫 本 质 上 扩展 了 这 些 定理 的 适用 范围 (使 之 适用 于 更 一 般 的 随机 变量 ). 例如, 他 
的 第 一 个 成 果 是 , 证 明了 大 数 定律 对 于 任意 独立 随机 变量 之 和 成 立 , 只 要 这 些 随 机 
变量 的 绝对 值 都 不 大 于 某 一 常数 . (下 一 步 工作 是 A. A. 马尔 可 夫 完 成 的 , 证 明 用 到 
“ 切 比 雪夫 - 马尔 可 夫 不 等 式 ”.) 

在 大 数 定律 之 后 , п.л. 切 比 雪夫 转向 “对 于 独立 随机 变量 之 和 , НЯ - 拉 普 
拉 斯 定理 的 正确 性 ”, 为 此 他 提出 了 新 的 证 明 方法 — Ek, 后 来 由 А. А. 马尔 可 夫 
实现 . 


Ф априори” (а priori) 汉语 常 译 为 “ 先 验 ", 有 的 译 为 “ 验 前 ”. — 译 者 
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在 寻找 棣 莫 弗 - 拉 普 拉 斯 定理 成 立 的 一 般 条 件 的 过 程 中 , А. М. 李 雅 普 诺 夫 迈 
出 了 意 想不到 的 一 步 , 他 用 由 拉 普 拉 斯 开始 的 特征 函数 方法 证 明了 , 只 要 存在 5 > 0 
使 被 加 独立 随机 变量 有 2 + 5 阶 矩 , 而 没 必要 存在 一 切 阶 和 矩 , 即 可 证 明 该 定理 . 此 条 
件 称 做 “ 李 雅 普 诺 夫 条 件 ”. 

作为 原则 上 新 的 概念 应 该 指出 , A А. 马尔 可 夫 引 进 的 、 具 有 “无 后 效 ” 性 的 、 
相依 ( 非 独 立 ) 随机 变量 , 现在 称 做 “马尔 可 夫 链 ”. 并 且 对 于 马尔 可 夫 链 , 首先 严格 
证 明了 “遍历 性 " 定理 . 

可 以 确切 地 断言 , п. Л. 切 比 雪夫 , А. А. 马尔 可 夫 和 А. М. 李 雅 普 诺 夫 (“彼得 
BFW) 的 工作 , 为 后 来 概率 论 的 全 部 发 展 莫 定 了 坚实 的 基础 . 

19 世纪 的 后 半 叶 , 在 西欧 由 于 发 现 概率 论 与 纯 数学 、 统 计 物 理 的 深刻 联系 , 以 
及 数理 统计 莲 勃 发 展 , 对 于 概率 论 的 兴趣 开始 急速 增长 . 

在 这 个 时 期 , 概率 论 本 身 的 发 展 , 越 来 越 明显 地 受到 其 “古典 型 ”假设 (结局 的 
有 限 性 及 其 等 可 能 性 ) 的 强烈 制约 , 并 且 需 要 在 纯 数学 中 寻找 相应 的 扩展 . (这 里 应 
注意 , 当时 集合 论 才刚 刚 建立 , 而 测度 论 刚刚 处 于 创立 的 “门槛 ”). 

与 此 同时 , 在 纯 数学 中 , 特别 在 数论 中 , 科学 仿佛 离 概率 论 十 分 遥远 . 人 们 开始 
利用 概率 的 概念 , 并 且 得 到 了 纯 “ 概 率 ” 本 性 的 结果 , 开始 对 于 概率 的 直观 产生 兴趣 . 

例如 在 1890 Е, J. 庞 加 莱 (Jules Henri Poincaré, 1854 年 一 1912 年 ) 在 其 关于 
“三 物体 ”的 论文 中 得 出 如 下 结果 : 描绘 保持 “体积 ”变换 T 的 、 动 态 系统 运动 的 返 
回 性 的 结果 说 明 , 如 果 4 是 初始 状态 w 的 集合 , 则 对 于 “典型 的 ” w є А, 运动 的 轨 
道 T"w 将 无 限 多 次 返回 集合 А. ( 按 现代 语言 , 回 返 不 是 对 于 所 有 初始 状态 , 而 仅 对 
于 几乎 所 有 初始 状态 .) 

在 这 个 时 期 的 研究 中 , 人 们 常 提 到 “随机 抽样 ",“ 典 型 情形 ”,“ 特 殊 情形 ”. 在 J. 
庞 加 莱 的 教科 书 《Calcul des Probabilites》([56], 1896 年 ) 中 , 提出 一 个 问题 “在 区 
间 [0,1] 上 随机 选取 的 一 点 , 恰好 是 有 理 数 的 概率 如 何 ?” 

1888 年 天 文学 家 1. А. Н. 盖 尔 登 (Johan August Hugo Gylden, 1841 年 一 1896 
年 ) 发 表 了 论文 [18], 论文 的 起 源 ( 像 J. 庞 加 莱 [57], 1890 年 的 论文 一 样 ) 与 星球 的 
稳定 性 有 关 , 而 现在 应 纳入 概率 数论 . 论文 的 内 容 如 下 . 

以 “随机 地 ”选取 一 个 数 є [0,1), 并 且 设 w= (a1,a2,…) Ж w 的 连续 分 数 分 
М, 其 中 а, = an(w) 是 整数 . (对 于 有 理 数 w c [0,1), 在 此 分 解 中 仅 有 有 限 个 on 不 
为 0, 并 且 由 (aaz) 形成 的 数 w( = (a1,a2,… ,ak,0,0,…), 用 于 做 w 的 最 优 
初始 逼近 .) 问 在 “典型 ”情形 下 , М п 的 值 充分 大 时 量 an(w) 的 性 质 如 何 ? 

虽然 并 不 严格 , J. А. Н. 盖 尔 登 证 明 , М п 充分 大 时 在 分 解 = (a1,a2,…) Ф, 
an = Е 的 值 在 “多 少 ”程度 上 与 к? ВЕН. 略 晚 些 , T. 布 罗 登 (T. Brodén, [12]) 和 
А. Й# (А. Wiman, [62]) 证 明 , 利用 几何 概率 , 如 果 把 “随机 ”抽取 w є [0,1) 看 作 
w 在 [0,1) 上 “均匀 分 布 " 则 当 п 一 со 时 an(w) = Е 的 概率 收敛 于 值 











概率 的 数学 理论 形成 的 简 史 .319 . 


мены Ик) 


由 此 可 见 , 对 于 充分 大 大 的 , 该 式 与 к? ERE, 而 这 实质 上 具有 盖 尔 登 的 形式 . 

19 世纪 的 后 半 叶 , 概率 的 概念 和 论断 , 开始 广泛 地 应 用 于 经 典 物理 和 统计 力学 . 
例如 , 只 需 注意 到 , 分 子 运动 速度 的 麦克 斯 韦 分 布 (James Clerk Maxwell, 1831 年 一 
1879 年 ; М, [44]); 布 耳 兹 曼 (Ludwig Boltzmann; 1844 年 一 1906 年 ) 时 间 平 均值 和 
遍历 假说 ( 见 [6], [7]). 

总 体 的 概念 与 他 们 的 名 字 相 联系 ,后 来 总 体 的 概念 在 吉普 斯 (Josiah Willard 
Gibbs, 1839 年 一 1903 年 ) 的 工作 中 得 到 进一步 发 展 ( 见 [17]). 

对 于 概率 论 以 后 全 部 的 发 展 , 以 及 关于 对 概率 方法 与 概念 作用 的 认识 的 深化 , 如 
下 一 些 学 者 都 起 了 重要 作用 : 1827 年 R. 布朗 (Robert Brown, 1773 年 一 1858 年 ) 发 
现 的 被 称 为 布朗 运动 的 现象 (对 该 现象 的 描绘 , 1828 年 发 表 在 皇 击 性 文章 《A Brief 
Account of Microscopical Observation ---) [11] Ф); 在 研究 铀 的 性 质 时 , 1896 年 А. 
贝克 尔 雷 尔 ((Antoine-) Henri Becquerel, 1852 年 一 1908 4) 发 现 了 放射 性 衰变 现 
象 ; 1900 年 L. 巴 彻 里 耶 (Louis bachelier, 1870 年 一 1946 年 , [2]) 利用 布朗 运动 对 股 
票 的 价格 进行 数学 描绘 ( 详 见 [74]). 

А. 爱 因 斯 坦 (Albert Einstein, 1879 年 一 1955 年 , [75]) 和 М. ИЖЕ ЗЕ 
(Marian Smoluchowski, 1872 年 一 1917 年 , [59]) 后 来 对 布朗 运动 , 作 了 定性 的 解释 
和 定量 的 描述 . 放射 性 现象 在 量子 力学 的 框架 内 得 到 了 说 明 , 量子 力学 是 20 世纪 的 
20 年 代 创立 的 . 

由 以 上 所 述 知 , 新 概率 概 型 和 模型 的 出 现 , 以 及 概率 的 思想 体系 都 超出 了 “古典 
型 概率 ”的 范围 , 并 且 要 求 有 新 的 概念 , 以 便 对 诸如 “来 自 区 间 [0,1) 的 样本 点 ”的 
含义 , 给 予 确切 的 数学 意义 , 更 不 用 说 对 于 “随机 ”布朗 运动 的 解释 了 . 从 这 种 观点 
看 来 , 非常 适时 的 是 , 产生 了 集合 论 , 和 由 Е. 博 雷 尔 (Emile Borel, 1871 年 一 1976 
年 ; [8]) 于 1898 年 引进 的 “ 博 雷 尔 测度 ”的 概念 ; 以 及 Н. 勒 贝 格 (Henri Lebesgue, 
1875 年 一 1941 年 ) 积分 理论 , 包含 在 其 1904 年 的 书 中 [40]; НЕ. 博 雷 尔 作为 长 
度 概念 的 推广 , 将 测度 引进 欧 几 里 得 空间 . 遵循 М. ЗБК (Maurice Fréchet, 1878 
年 一 1973 年 ; 1915 年 [71]) 现代 讲述 测度 论 , 是 在 抽象 可 测 空间 上 (关于 测度 论 和 
积分 的 历史 , 例如 见 [72]). 

实际 上 , 立即 可 以 察觉 , 博 雷 尔 测 度 论 和 勒 贝 格 积分 理论 概念 的 基础 , 不 但 可 以 
为 许多 研究 商定 基础 , 而 且 为 诸如 “在 区 间 [0,1) 是 随机 选 点 ”之 类 的 许多 直观 提 法 
赋予 确切 的 意义 . 而 且 , Е. 博 雷 尔 本 人 很 快 (1905 年 ) 就 将 理论 - 集合 方法 应 用 于 概 
率 论 , 证 明了 一 一 强大 数 定律 关于 实数 的 某 些 性 质 ,“ 以 概率 1” 成立 或 “几乎 
必然 ” 成立 . 

这 些 定理 给 出 一 定 的 印象 , “或 多 或 少 ”的 实数 , 具有 (在 如 下 指出 意义 上 ) Ч 
Ж” 性 质 . 这 些 定理 的 实质 如 下 . 
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假设 实数 w c [0,1). 而 w = 0.aiao.… 是 二 进 制 分 解 , 其 中 an = 0,1 (对 照 
上 面 的 w 分 解 为 连续 分 数 w = (ai,az,…))， ЖА, E vlw) 是 在 w 的 前 n ME 
ai ,an Ф 617 的 个 数 , 则 满足 条 件 : 当 一 oo 时 vn(w) 一 1/2 的 о ( 博 雷 尔 称 
之 为 “正规 的 ”) 集合 的 博 雷 尔 测度 等 于 1, 而 对 于 那些 (RRR) w, vlw) 不 收敛 ， 
且 相 应 集合 的 博 雷 尔 测 度 等 于 0. 

这 一 结果 (“ 博 雷 尔 强大 数 定律 ") 外 观 上 像 J. 伯 努 利 定理 (“大 数 定律 "). 然而 ， 
在 二 者 之 间 , 既 有 形式 上 数学 的 不 同 , 又 有 哲学 概念 上 的 差异 . 事实 上 , 在 大 数 定律 
中 仅仅 断定 : 对 于 任意 є > 0, 当 п 一 оо 时 事件 {w : lvn(w) - 1/2| > =} 的 概率 收敛 
于 0. 而 在 强大 数 定律 中 结果 更 多 : 事件 
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的 概率 趋向 0， 此 外 , 在 第 一 种 情形 下 , 命题 涉及 有 限 序列 (aaz ,an) > 1 
概率 的 某 些 性 质 , 以 及 这 些 概率 的 极限 . 而 在 第 二 种 情形 下 , 命题 涉及 定义 在 无 限 序 
列 (aaz ,an,…) 概率 的 性 质 , 以 及 这 些 概率 的 极限 . (与 概率 论 方法 渗透 到 数 
论 中 , 以 及 构建 现代 概率 论 , 有 关 的 数学 和 哲学 问题 的 广泛 资料 详细 阐述 , 参见 专著 
“Creating Modern Probability”, [54], 作者 是 J. у. 普 拉 托 (Зап von Plato)). 

4. 第 四 时 期 (20 世纪 初 和 20 世纪 中 时 ) 19 世纪 末 , 表现 出 概率 论 与 纯 数学 
的 联系 , 使 得 р. 希 尔 伯 特 (David Hilbert, 1862 年 一 1943 年 ) 提出 概率 论 数学 化 的 
问题 . 1900 年 8 月 8 日 , 在 巴黎 召开 的 第 二 届 数 学 学 术 会 议 上 , D. 希 尔 伯 特 在 他 的 
提纲 性 报告 中 提出 上 述 问题 . 在 他 的 著名 课题 中 (第 一 个 是 关于 连续 统 - 假说 ), 第 
六 个 是 数学 起 决定 性 作用 的 物理 学 科 的 公理 化 问题 . D. 希 尔 伯 特 把 概率 论 和 力学 归 
为 这 样 的 学 科 , 他 还 指出 在 物理 学 , 其 中 包括 气体 动能 理论 , 严格 的 和 尚未 满意 的 发 
展 平均 值 方法 的 必要 性 . р. 希 尔 伯 特 指出 , 格 丁 根 (Göttingen) 大 学 @ 的 С. ЖЕ 
(Georg BoHlmann, 1869 年 一 1928 年 ) 副教授 , 由 他 提出 了 “关于 概率 论 的 公理 化 
问题 的 动议 ”, 他 1900 年 在 巴黎 召开 的 保险 统计 人 员 会 议 上 作 了 关于 公理 化 问题 的 
发 言 (A [5], [19]). С. 布 耳 曼 引进 的 概率 定义 为 事件 上 的 (有限 - 可 加 ) 函数 , 然而 
没有 “事件 系 ”的 充分 清晰 的 定义 , 其 实 他 自己 也 承认 这 一 点 . 

概率 论 形成 历史 的 第 四 个 时 期 一 一 是 概率 论 的 逻辑 黄 基 和 形成 数学 学 科 的 时 
期 . 

ДЕ D. 希 尔 伯 特 的 报告 之 后 , 很 快 出 现 了 几 个 建立 概率 的 数学 理论 的 尝试 , 其 共 

同 的 特点 是 , 以 集合 论 与 测度 论 为 基础 . 

例如 , 1904 年 В. 拉 默 尔 (R. Limmel, [41]; 亦 见 [19]) 为 描绘 结局 的 集合 , 他 试图 
利用 集合 论 , 不 过 , 概率 的 概念 (使 用 术语 “content”, 且 结合 体积 , 面积 , 长 度 .…… ) 

@ 格 丁 根 是 德国 城市 , 人 口 十 几 万 . 格 丁 根 大 学 是 一 所 综合 性 大 学 1737 年 创立 , 也 是 该 城 唯一 


一 所 高 校 , 学 生 两 万 人 左右 . 格 丁 根 科学 院 1751 年 成 立 , 有 近 百 名 院士 和 百 余 名 通讯 院士 . -一 № 
者 








概率 的 数学 理论 形成 的 简 史 > 321. 





本 身 仍然 停留 在 以 往 时 期 的 直观 水 平 上 . 

另 一 个 作者 U. 布 罗 吉 (Ugo Broggi, 1880 年 一 1965 年 ) 在 其 由 D. 希 尔 伯 特 指 
导 的 学 位 论文 (1907 年 , [10]; 亦 见 [19]) 中 , 也 运用 博 雷 尔 和 勒 贝 格 测度 论 (基于 它 
在 1904 年 勒 贝 格 的 书 [40]) 中 的 概念 , 但 是 (AR - 可 加 ) 概率 的 概念 本 身 (在 最 简 
单 的 场合 ) 需要 运用 “相对 测度 ",“ 相 对 频率 " 和 (在 一 般 情形 下 ) 某 种 人 为 的 极限 
过 程 . 

伯 恩 斯 坦 在 随后 关于 概率 论 的 逻辑 奠基 工作 作者 中 , 首先 应 当 提 到 的 是 , С. 
H. 伯 恩 斯 坦 (C. Н. Бернштейн, 1880 年 一 1968 年 ) 和 В. von 米 泽 斯 (Richard von 
Mises, 1883 年 一 1953 年 ). 

С. н. 伯 恩 斯 坦 的 公理 化 体系 ([4], 1917 年 ), 以 事件 按 其 大 或 小 的 似 然 程度 的 质 
量 比较 为 基础 , 而 概率 的 数值 本 身 表现 为 某 个 任意 值 . 

费 内 提 JAK, 在 В. de 费 内 提 (Bruno de Finetti, 1906 年 一 1985 Е) 20 年 代 
Ж 一 30 年 代 初 的 工作 , 用 基于 与 主观 数量 判断 十 分 相似 的 方法 (“主观 知识 体系 ”)， 
得 到 广泛 的 发 展 (例如 , 见 [65]~[70]). 

В. de 费 内 提 的 思想 , 得 到 统计 学 中 许多 贝 叶 斯 方向 代表 的 很 大 支持 , 例如 , L. J. 
塞 维 奇 (Leonard Jimmie Savage, 1917 年 — 1971 年 ; [60]). В. de 费 内 提 的 思想 , 在 
有 相当 大 的 作用 的 对 策 论 和 判决 理论 中 , 也 得 到 同样 的 支持 . 

米 泽 斯 1919 年 R. 米 泽 斯 提出 了 ( [49], [50]), 论证 概率 论 的 所 谓 频率 方法 ( 亦 
称 统计 方法 或 经 验方 法 ). 他 的 所 谓 频率 方法 以 如 下 的 思想 为 基础 , 概率 的 概念 只 可 
能 用 于 所 谓 “ЖЖ”, 即 个 别 无 限 有 序数 列 , 且 这 种 有 序数 列 具有 其 形成 的 某 种 “ 随 
机 ”性 质 . 

в. 米 泽 斯 的 一 般 概 形 描绘 如 下 . 

考虑 “试验 ”结局 的 某 个 样本 空间 , 并 且 假 设 可 以 进行 无 限 多 次 试验 , 得 序列 
т = (2122,5), 其 中 zw 是 第 п 次 “试验 ”的 结局 . 其 次 , 设 4 是 试验 结局 的 集合 
的 子 集 , 而 


(а) = Уба) 
i=1 


是 “事件 ” 4 在 前 n 次“ 试验” 中 出 现 的 频率 . 
序列 т = (z1,z2,…) 称 做 集体 , 如 果 它 满足 如 下 ( 称 为 米 泽 斯 泽 一 性 条 件 ( 见 
[49j~ [51]) 的 ) 两 个 假说 . 
I (对 于 序列 频率 的 极限 存在 ) 对 于 一 切 “容许 ” 集合 А, 频率 的 极限 存在 : 
limvn(A;7) (= р(А;т)); 


I (对 于 子 序列 频率 的 极限 存在 ) 对 于 一 切 由 序列 т = (zl zz,……),， 利用 某 一 
事先 约定 的 (“容许 ") 其 形成 规则 体系 ( 米 泽 斯 称 之 为 位 选择 函数 [Place selection 
functions]), 得 到 的 子 序列 r = (zi,z2,……)， 频率 їто„ (А; 27) 的 极限 与 关于 序列 
т = (Zz1,72,…) 本 身 的 极限 一 样 , 即 等 于 Шз (А; т). 
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按照 米 泽 斯 , 只 有 联系 具体 的 和 集体” 才 可 以 称 “集合 4 的 概率 ", 而 且 (根据 假 
说 D 这 一 概率 (P(A4;z)) 定义 为 频率 lim wn(4;z) 的 极限 . 需要 强调 , 假如 该 极限 不 存 
在 ( 即 按照 定义 r, 不 是 “集体 "), 那么 相应 的 概率 也 就 没有 定义 . 第 二 个 假说 , 米 泽 斯 
用 来 表示 (相应 的 直观 , 恰好 是 一 切 概率 研究 的 基础 ) 在 形成 “集体 " = (z1,z2,…) 
时 “随机 性 ”概念 , 反映 该 序列 “ 非 正则 性 ” 思想 , 以 及 对 于 任意 п > 1, 根据 “过 去 ” 
(zz2……,Tn-i), 其 “将 来 " 值 (zn,zn+1,…) 的 “不 可 预测 性 ”. (赞同 第 二 章 81 Л 
绍 的 , 柯 尔 莫 戈 洛 夫 公 理化 体系 的 , 概率 论 的 代表 人 物 , 这 样 的 序列 应 当 联想 到 , 对 
独立 同 分 布 随 机 变量 观测 结局 的 “典型 ”序列 ; 见 第 一 章 85 第 4 小 节 .) 

米 泽 斯 , 像 他 自己 ([51] 第 1 页 ) 说 的 那样 , 在 建立 “a mathematical theory of 
repetitive events”( 重 复 事 件 的 数学 理论 ) 时 提出 的 假说 ， (特别 是 在 30 年 代 ) 引起 了 
很 大 的 争议 和 批评 基本 的 不 同意 见 如 下 : 实际 中 人 们 遇 到 的 一 般 是 有 限 序列 , 而 
不 是 无 限 序列 . 因而 , 实际 上 无 法 确定 极限 lim vn(4;7) 是 否 存在 ; 在 从 序列 т 转移 
到 序列 а 时 , 实际 上 也 无 法 确定 该 极限 《敏感 性 》. 米 泽 斯 定义 的 子 序列 形成 “ 容 
ҮР” 规则 的 概念 , 也 受到 严重 的 批评 , 使 得 在 非 此 即 彼 的 条 件 呈 中 , 出 现 许多 (ВЫ 
两 可 ”) 规则 定义 的 模糊 不 清晰 性 . 

如 果 考 虑 由 0 和 1 形成 的 序列 х = (zi1,z2,…)， 而 且 对 于 该 序列 ， 极 限 
lim vn(z; {1}) 的 值 属于 区 间 (0,1), 则 该 序列 既 含 无 限 个 0 又 含 无 限 个 1. 因此 , 如 果 
容许 任何 形成 子 序列 的 规则 , 那么 , 例如 可 以 由 т 组 成 仅 含 “1” 的 子 序列 т", 显然 
limvn(z'; {1}) = 1. 由 此 可 见 ， 关于 一 切 形 成 子 序列 的 方法 的 非 平凡 “集体 ”不 存在 . 

在 证 明 “集体 ”类 “ 非 空 ”的 第 一 步 , 是 由 А. 瓦尔 德 (Abraham Wald, 1902 
年 一 1950 年 ) 1937 年 在 其 论文 [13] 中 实现 的 ， 在 他 由 序列 т = (z1,z2,…) № 
造 子 序列 v = (seh) В, 利用 只 取 0 和 1 两 个 可 能 值 的 可 数 个 函数 组 fi = 
буо), 1 车 六 zi ti) =1, WEE tny 属于 子 序列 z'; Æ f(z1,…， 
т) = 0, 则 元 素 zn+l ¢ т'. 1940 年 А. 乔 尔 奇 (Alonzo Church, 1903 年 一 1995 年 ) 
提出 形成 子 序列 的 另 一 种 方法 ( 见 [73]), 方法 基于 如 下 想法 : 这 样 的 形成 方法 应 该 
是 实际 上 “可 有 效 计算 的 ". 乔 尔 奇 的 这 一 思想 导致 , 他 为 序列 的 建立 而 提出 的 , 函 
数 计算 算法 的 概念 . (例如 , 设 т, 有 两 个 可 能 值 : wi = 0,wa = 1. 将 序列 与 一 正 数 


а 
a=) ы 
k=1 


相对 应 , 其 中 决定 于 i = wi ШЖ ф = (Л) 是 定义 在 集合 {0,1,2,…} 上 的 , 给 定 
的 二 进 制 {0,1} - 函数 , 则 当 (А) = 1 时 zn+1 包含 新 序列 z' 中 , 而 当 (Аъ) = 0 
时 zn+1 不 包含 zx Ф). 

“集体 " 作为 具有 “随机 性 ”序列 的 说 明和 证 据 之 一 , 米 泽 斯 引进 了 直观 的 论据 : 
对 于 这 样 的 序列 不 能 构造 “能 获胜 的 对 策 体系 ”. 

ZE J. 维尔 (Jean Ville, 1910 年 — 1988 年 ) 1939 年 不 大 的 专著 [14] Ф, 对 这 样 
的 论断 进行 了 批评 性 分 析 , 1. 维尔 在 [14] 中 给 米 泽 斯 的 结果 以 严格 的 数学 形式 . 需 
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要 指出 , 也 正 是 在 此 专著 中 , 首次 (作为 数学 概念 ) EARE W. 

由 以 上 引进 的 概率 论 公理 化 不 同方 法 (o ‚ 伯 因 斯坦, de 费 内 提 , 米 泽 斯 ) 的 
描述 可 见 , 在 他 们 那里 留 有 概念 的 复杂 化 与 过 分 超 负荷 错误 的 印记 , 其 中 多 是 出 于 
建立 尽 可 能 接近 实际 应 用 的 、 概 率 概 形 的 愿望 . 正 像 A. Н. 柯 尔 莫 戈 洛 夫 在 其 专著 

《概率 论 的 基本 概念 》 [23] 中 指出 的 , 这 无 法 产生 简单 的 公理 化 体系 . 

А. H. КЖ Ж, 提 到 他 对 于 概率 论 逻 辑 基础 的 兴趣 的 , 发 表 的 第 一 篇 作品 ， 
Ж ( 非 广 为 已 知 的 ) 论文 “测度 与 概率 演算 的 一 般 理论 ” [27]. 论文 的 名 称 及 其 内 容 表 
ВЯ, А. Н. 柯 尔 莫 戈 洛 夫 把 集合 论 与 测度 论 , 看 作 概率 论 逻 辑 基础 的 可 能 性 所 在 . 由 
以 上 的 叙述 可 见 , 这 种 情况 完全 不 是 新 的 , 并 且 对 于 莫斯科 数学 学 派 是 完全 自然 的 . 
因为 对 于 莫斯科 数学 学 派 , 集合 论 及 度量 函数 理论 , 是 数学 研究 的 基本 领域 之 一 . 

在 这 篇 论文 (1929 E) 与 《概率 论 的 基本 概念 》( [23], 1933 年 ) 之 间 , A. Н. 柯 尔 
英 臣 洛 夫 发 表 了 他 著名 的 论文 之 一 “概率 论 的 分 析 方 法 ”[29]. 关于 这 篇 论文 , П.С. 
亚历山大 罗 夫 (N. С. Алексадров) 和 辛 钦 [1] 写 道 : “在 整个 20 世纪 的 整个 概率 论 
中 , 很 难 指出 对 于 未 来 科学 的 发 展 如 此 黄 基 性 的 研究 成 果 .……… A 

这 篇 论文 的 重大 价值 在 于 , 它 不 仅 黄 定 了 马尔 可 夫 随 机 过 程 的 理论 基础 , 而 且 
它 表 明 概 率 论 整体 上 与 数学 分 析 (特别 是 与 常 微分 和 偏 微分 方程 论 ) 的 联系 , 以 及 与 
经 典 力学 和 经 典 物理 学 等 的 联系 . 

鉴于 所 考虑 的 概率 的 数学 理论 基础 问题 , 我 们 指出 , 璧 如 说 论文 “分析 方法 ” [29]， 
可 以 看 作 逻 辑 上 建立 随机 过 程 基础 必要 性 的 、“ 物 理 的 ”动机 综合 体 , 是 ( 除 “ 公 理 
化 ”外 ) “基本 概念 ” 链 中 的 一 环 . 

А. Н. 柯 尔 莫 戈 洛 夫 提出 的 ( 非 正 式 的 ) 概率 论 的 公理 化 , 基础 是 概率 空间 


(9,Я,Р) 


的 概念 , 其 中 (0,9) 是 (* 基 本 ”结局 和 “事件 "的 ) 某 一 (抽象 ) 可 测 空间 , 而 P 是 
F 中 的 非 负 可 数 - 可 加 集 函 数 , 且 满足 规范 性 条 件 P(Q) = 1 (WF); 见 第 二 章 
81. 

关于 随机 变量 5 = (о) 理解 为 多 - 可 测 函数 上 = Elw), 而 按 测度 Р 定义 的 
&(w) 的 勒 贝 格 积分 是 其 数学 期 望 . 

关于 多 C9 Ho- 子 代数 条 件数 学 期 望 EEF) 是 新 概念 (Л A. H. PRA 
苹 洛 夫 的 《概率 论 的 基本 概念 》 (第 二 版 ) 的 前 言 [24]). 

在 《概率 论 的 基本 概念 》 中 , 有 一 定理 , А. Н. 柯 尔 葛 戈 洛 夫 称 之 为 基本 的 , 这 
本 身 就 强调 它 所 包含 (关于 具有 给 定 有 限 维 分 布 的 存在 性 的 过 程 ) 论断 的 重要 性 . 这 
里 , 问题 的 实质 如 下 . 

ЖА. Н. 柯 尔 莫 戈 洛 夫 的 论文 “概率 论 的 分 析 方法 ”[29] F, 马尔 可 夫 过 程 用 
于 “随机 确定 系统 ”的 发 展 变化 , 这 用 满足 “ 柯 尔 莫 戈 洛 夫 - 查 普 曼 方程 ” 的、 函数 
P(s,z;t, А) 性 质 的 语言 描述 . 函数 P(s,z;t А) 称 做 转移 概率 函数 , 因为 它 表示 “在 
时 间 s RAE 处 于 状态 т, 而 在 时 间 t 系统 ' 处 于 其 状态 相 空 间 的 集合 4 H”. 
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同样 , 同一 时 间 , 在 [30], [31], [66], [67] 关于 “ 齐 次 独立 增 量 随机 过 程 ” 的 工作 
中 , 所 有 的 研究 都 用 满足 函数 方程 


Раца) = f Ра ари) 


的 函数 已 (z) 性 质 的 语言 进行 的 , 在 说 明 P,a) 是 “经 时 间 上 过 程 的 增 量 不 大 于 x 的 
概率 ” 时 , 上面 的 方程 是 自然 产生 的 . 

不 过 , 从 形式 逻辑 的 观点 看 , 可 以 称 为 “具有 给 定 转移 概率 P(s,z;t, А) RAE 
分 布 Р(х) 的 ' 过 程 ' ”的 对 象 之 存在 性 问题 , 仍然 没有 解决 . 

就 是 在 求解 该 问题 时 , 涉及 如 下 基本 定理 : 对 于 每 个 一 致 有 限 维 概率 分 布 组 


Канз, ta (T1 T23 En) 0<<%Ю <- <tn Ti ER, 
可 以 建立 一 个 概率 空间 (0, F, Р) 和 随机 变量 组 X = (Х,),>о‚ Xt = Хи), 使 得 
Р(Х, S Ti, Xn < то, Ke, < En} = Fetar и, (11,12, ,Tn). 


作为 О 取 实 函数 w = (ил) о 的 空间 RO, 作为 多 取 柱 集 生成 的 最 小 - К 
数 , 而 测度 P 是 由 柱 集 代数 上 的 测度 (在 柱 集 代数 上 , 该 测度 是 自然 地 根据 有 限 维 
概率 分 布 建立 的 ), 开拓 到 Я 上 概率 测度 . 随机 变量 组 Xt(w) 是 用 坐标 方式 建立 的 : 
若 w = (шо, 则 Xew) = we (这 一 构造 说 明了 , 为 何 “随机 过 程 ”的 概念 , 常 等 同 
于 ( 它 ) 在 函数 空间 RO) 中 的 测度 ). 

在 《概率 论 的 基本 概念 》 中 , 以 不 大 的 篇 幅 讲 概率 论 的 适用 性 问题 . 

在 描绘 将 概率 论 用 于 “现实 试验 世界 ”的 条 件 模式 时 , А. Н. 柯 尔 莫 戈 洛 夫 许 多 
方面 是 按 米 泽 斯 做 的 , 而 且 表明 在 概率 论 的 解释 与 应 用 性 问题 上 它 与 米 泽 斯 方法 并 
不 是 格格 不 入 的 . 

关于 这 一 条 件 模式 的 实质 可 以 描述 如 下 . 

假设 有 某 一 条 件 的 综合 体 , 使 得 可 以 进行 无 限 次 重复 试验 . 

设 (zu za … ,zn) 表示 п 次 试验 的 结果 , 其 中 例如 可 以 假设 zi(1 < i < n) 属于 
RA X. 此 外 , 设 4 是 我 们 感 兴趣 的 X 的 某 一 子 集 . 

WR zi є А, 则 称 第 i 次 试验 出 现 了 事件 А. (注意 , 事先 不 作 诸如 ; 试验 是 “ 随 
机 和 独立 地 进行 的 ”等 , 关于 试验 的 “概率 ”性 质 之 类 的 任何 假设 ; 对 于 导致 事件 А 
的 “情形 ”也 不 作 任 何 假设 ，……… .) 

其 次 , 假设 可 以 赋予 事件 А 某 个 数 ( 记 作 Р(А)), 使 得 实际 上 可 以 认为 , п w 
试验 中 事件 4 出 现 的 频率 w(4), 对 于 充分 大 的 n, 与 P(A) 的 差异 很 小 .而 如 果 
Р(А) 较 小 , 那么 实际 上 可 以 认为 , 在 一 次 试验 中 事件 4 不 出 现 . 

在 《概率 论 的 基本 概念 》 中 , А. н. 柯 尔 莫 戈 洛 夫 , 在 未 讨论 概率 论 对 于 《现实 
世界 》 可 应 用 性 条 件 细节 的 情况 下 , 写 道 “我 们 …… 有 意识 地 把 经 验 世 界 中 , 关于 
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概率 概念 的 高 深 哲 学 著作 放 在 一 边 `, 但 是 在 第 一 章 引言 中 指出 , 存在 概率 论 的 应 用 
领域 , 其 中 “与 “偶然 性 * 和 ‘概率 概念 等 词 的 本 意 毫 无 关系 ”( 见 [24]). 

三 十 年 后 , А. Н. 柯 尔 莫 戈 洛 夫 又 回 到 概率 的 可 应 用 性 问题 ( 见 [32]~[37]), 对 
于 该 问题 的 解 , 他 提出 两 种 (“第 一 种 ”和 “第 二 种 ”) 处 理 方法 , 相应 为 “公理 化 随 
机 性 ”的 概念 和 “算法 的 复杂 性 ”的 概念 . 他 这 时 特别 强调 [37], 与 定义 了 无 限 序 列 
(z1,72,…) ЖР. 米 泽 斯 和 А. 乔 尔 奇 不 同 , 他 对 于 “随机 性 ”概念 的 处 理 方法 , 带 有 
严格 有 限 性 , 即 涉及 有 限 长 度 序列 (11,22, тм), N > 1 (FE [38] 的 情形 称 为 链 )， 
这 实际 上 是 现实 中 的 情形 . 

“公理 化 随机 性 ”是 这 样 引进 的 . 

设 (z1,72,… ,zw) 是 以 长 为 N(n < М) 的 二 进 制 ri = 0,1 链 . 称 此 链 关 于 (有 
限 ) 容许 算法 的 全 体 理 Æ (n,e) - 随机 的 , 如 果 存 在 这 样 一 个 数 p(= P({1})), 使 对 于 
利用 某 个 算法 A є Ф, 由 (zi1,z2,… тм) 得 到 的 任何 链 (х\,т},---,г„),п<т< М, 
ШЖ 1” 的 频率 与 vw,(z'; {1}) 离 p 的 差异 不 大 于 e (算法 的 全 体 Ф 中 导致 长 为 
m< n 的 链 , 不 予 考虑 ). 

А. Н. НЗ АЕ [32] 中 证 明 , 假如 对 于 给 定 的 n 和 0 < < < 1, 容许 算法 
的 个 数 不 大 于 





了 exp{2ne2(1 -a)}, 


则 对 于 每 一 个 0 < p < 1 和 任意 N > п, 存在 具有 (п, є) - 随机 性 (“公理 化 随机 性 ”) 
的 链 (11,22, тм). 

由 于 容许 描绘 和 选择 算法 的 不 确定 性 , 在 上 面 描绘 的 分 出 “随机 ” 链 ( 像 米 泽 斯 
情形 一 样 ) 的 方法 , 有 一 定 任意 性 . 这 时 这 一 算法 类 明显 不 会 太 大 , 否则 “公理 化 随 
机 ” 链 的 集合 成 为 空 集 . 与 此 同时 , 总 是 希望 容许 算法 类 构造 简单 (例如 可 以 用 表格 
表示 ). 

在 概率 论 中 形成 一 种 完全 确定 、 加 强 不 同类 型 的 、 关 于 “典型 随机 实现 相当 不 
正规 的 , 十 分 复杂 的 ”概率 论点 的 观念 . 

因此 , 如 果 倾 向 于 , 使 链 及 序列 “随机 性 ”的 算法 定义 , 最 大 限度 地 接近 关于 随 
机 实现 构造 的 概率 概念 , 则 Ф 中 的 算法 (的 全 体 ) 容许 挑 出 “非典 型 的 , ЖЮ ИРКЕ” 
链 , 把 那些 充分 非 正则 的 , 十 分 复杂 的 定 为 “随机 的 ”. 

这 种 理由 导致 A. Н. 柯 尔 莫 戈 洛 夫 的 “第 二 种 ”处 理 方法 , 导致 “随机 性 ”概念 ， 
其 中 着 重点 不 是 所 考虑 的 算法 “简单 ”, 而 是 链 本 身 的 “复杂 性 ”和 “径直 地 ”引进 
“复杂 性 的 ” 某 个 数字 特征 , 使 之 表示 形成 该 链 时 “ 非 正则 性 ”程度 . 

这 一 数字 特征 就 是 单个 链 z 关于 算法 4 的 所 谓 “ 算 法 的 ”( 或 “ 柯 尔 莫 匠 洛 夫 
的 ”) 复杂 性 Kala); 形象 地 说 , Ka(z) 定义 为 满足 如 下 条 件 的 二 进 制 链 的 长 度 : 在 算 
法 (机 器 , 计算 机 ……… ) 的 “入 口 ” 输入 А, 容许 同一 链 在 “出 口 ”再 现 . 
正式 的 定义 如 下 . 

设 у; 是 一 切 有 限 二 进 制 链 (z1,z2,… ,zn) 的 全 体 , 以 lz|(= п) 表示 链 的 长 度 ， 
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而 是 某 一 算法 类 . 实数 
Кл(=) = minfipl: A(p) = =}, 


称 做 链 теу 关于 算法 A cS 的 复杂 性 . Ж Kala) 是 在 算法 А “АП” 的 二 进 
制 链 р 的 最 小 长 度 (lol), 并 且 在 链 的 “出 口 ” z(4(p) = т) 将 得 到 恢复 . 

А. Н. 柯 尔 莫 戈 洛 夫 在 [34] 中 证 明 , (对 于 某 一 重要 算法 类 0) 有 如 下 结果 : 存在 
这 样 的 通用 算法 U c D, 对 于 任意 4 є Ф 存在 常数 C(A), 使 对 于 任意 链 теу, 有 


Ku(z) < КА(т) + C(A), 
而 对 于 通用 算法 和 О", 
К» () - Kus(z)| <C, re, 


其 中 C 不 依赖 于 ге D. (А. н. 柯 尔 莫 戈 洛 夫 在 [34] 中 指出 , P. 所 罗 门 诺 夫 |Р. 
Соломонов] 同时 证 明了 类 似 的 结果 ). 

这 一 事实 (以 及 对 于 “典型 ” 链 zx, Ku(z) 的 |z| 值 随 增长 而 增长 ) 决定 如 下 定 
X: Æ K(x) = Ku(z) ЖИ теу 关于 算法 类 再 的 复杂 性 , 其 中 U 是 更 中 的 某 
一 通用 算法 . 

Ж K(z) 通常 称 做 “对 象 " x 算法 复杂 性 或 柯 尔 莫 苞 洛 夫 复 杂 性 . A. Н. 柯 尔 莫 
戈 洛 夫 把 该 量 看 作 包 含 在 “有 限 对 象 ” z 中 的 算法 信息 质量 的 度量 , 并 且 称 之 为 r 
Им. 并且 认为 这 个 概念 是 比 概率 信息 量 的 概念 更 基本 , 而 为 概率 信息 量 的 要 求知 
道 在 “对 象 " x 上 的 概率 分 布 . 

Ж K(z) 还 可 以 视 为 “文本 ”z 的 压缩 程度 的 指标 . 如 果 在 类 Ф 中 包含 元 素 的 简 
单 计数 算法 , 则 很 明显 (精确 到 常数 ) ВЕ z 的 “复杂 性 ”K(z) 不 大 于 其 长 度 |z|. 另 一 
方面 , 由 简单 的 讨论 可 见 , “复杂 性 ” 小 于 К 的 (二 进 制 ) 链 г 的 数量 不 大 于 2K 一 1， 
等 于 小 于 长 度 K 的 不 同 “ 输 入 ”二 进 制 序列 的 个 数 : 


1+2+...+2К-1 =2К — 1. 


其 次 , 通过 简单 的 论证 (例如 , 见 [15]) 可 以 证 明 , 看 在 这 样 的 链 т: 其 “复杂 性 ” 
(精确 到 常数 ) 等 于 ( 且 不 可 能 大 于 ) 长 度 lz|, 并 且 容许 强压 缩 (“复杂 性 ”为 n 一 a 的 
链 的 比率 不 大 于 2-*). 由 全 部 所 作 的 这 些 论述 , 自然 地 导致 如 下 的 定义 : 算法 的 “ 复 
杂 性 ”K(z) 接近 |z| 的 链 т ЖЖ (关于 算法 类 Ф) “算法 上 随机 的 ”. 

换 句 话说 , 算法 的 处 理 方法 © 判定 这 样 一 些 链 z 为 “随机 的 ”, 假如 其 “复杂 性 ” 
是 最 大 的 (K(z) ~ |z]). 

А.Н. 柯 尔 莫 戈 洛 夫 引进 的 “复杂 性 ”的 概念 , 产生 了 整个 算法 随机 性 的 方向 ， 
HA “ВК ЧЕ”, 在 最 广泛 的 数学 及 其 应 用 领域 得 到 众多 的 应 用 (例如 ， 
FEJL [38], [45]~[48], [22]). 

@ 即 前 面 提 到 的 , А. н. 柯 尔 莫 戈 洛 夫 “第 二 种 ” 处理 方 法 , 对 应 于 “算法 的 复杂 性 ". — 译 者 
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在 概率 论 中 , 这 些 新 概念 是 一 系列 工作 的 开端 : 说 明 对 于 何 种 链 和 序列 的 “ 算 
法 随机 性 ”, 概率 ”统计 规律 性 (诸如 , 强大 数 定律 , 重 对 数 定律 ……: ) 成 立 (例如 ， 
A [16]), 从 而 有 可 能 运用 概率 论 的 方法 及 其 结果 , 而 在 前 面 已 经 指出 的 那些 领域 ( 见 
[24]), *5 ' 偶 然 性 ' 和 ' 概 率 ' 概念 等 词 的 本 意 毫 无 关系 ”. 
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第 四 章 


Я. А. Н. 柯 尔 莫 戈 洛 夫 “0—1” 律 在 他 的 书 [32] 中 . 关于 Е. 休 伊 特 (Е. Hewitt) 
和 塞 维 奇 "0 - 1” 律 , 亦 见 А. А. 博 罗 夫 科 夫 (А. А. Боровков) [7], L. 布 赖 曼 (Л. 
Брейман) [8], В. В. 阿 什 (R. В. Ash) [81]. 
5254. 这 里 是 А.Н. 柯 尔 莫 戈 洛 夫 和 А. Я. 辛 钦 得 到 的 基本 结果 ( 见 [32] 以 
及 其 中 的 文献 ). КМ, В. В. 彼得 罗 夫 (W. W. Petrov) [53] #1, W. Е. 斯 托 特 (W. Е. 
Stout) [66]. 关于 数论 中 的 概率 方法 , I Й. ЕН (Й. Кубилюс)® [36]. 
我 们 现在 对 于 伯 努 利 概 形 , 回忆 “强大 数 定律 和 重 对 数 定律 ”的 历史 . 
关于 强大 数 定律 最 早 的 工作 , 出 现在 E. 博 雷 尔 如 下 论文 中 :“ 关 于 集合 [0, 1) 中 数 
的 正 态 性 ” (Е. Borel. Les probabilittés dénombrables et leurs applications arithmétiqes 
// Rendiconti del Circolo Matematico di Palermo. — 1909. — \.27 — P.247~271). 如 
果 使 用 83 例 2 的 记号 , 则 对 于 量 
< 1 
8. = I(ék = 1) – = |, 
二 人 (к = 1) 5) 
Е. 博 雷 尔 所 得 结果 是 : (关于 勒 贝 格 测度 ) 对 于 几乎 一 切 ше [0,1), FE N = N(w)， 
当 n>N(w) 时 ,有 





So) 56а ыы. 





外 立陶宛 数学 家 (1921 年 ~), 立陶宛 科学 院 院 士 ， А, 一 一 译 者 
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这 样 , 特别 . 几乎 必然 (处 处 ) 5, = о(п). 

下 一 步 由 F. 豪 斯 多 夫 (Е. Hausdorff, Grundzüge дег Mengenlehre, 一 Leipzig: 
Veit, 1914), 证 明了 , 对 于 任意 => 0, 几乎 必然 Sn = о(п!/?+=). 

在 1914 年 , G. H. 哈代 (С. Н. Hardy) 和 J. Е. 李 特 尔 伍德 (J. Е. Littlewood, 
Some Problems of Diophantine approximation//Acta Mathematica, 一 1914. 一 , V.37, 
一 P.155~239) 证 明 , 几乎 必然 Sn = О((п1пп)!/?). 

在 1922 年 , Н. D. 斯 坦 因 豪 斯 (H. D. Steinhaus, Les probabilités dénombrables 
et leur rappot & la théorie de la mesure//Fundamenta Mathematicae, — 1923. — V4, 


一 P.286~310) 将 G. H. 哈代 和 J. Е. 李 特 尔 伍德 的 结果 精确 化 , 证 明 几 乎 必然 , 有 





lim sup anian <1 

1923 { A. Я. ЗЕ (А. J. Khinchin, Über dyadische Brüche//Mathematische 
Zeitschrift 一 1923. 一 V18, P.109~116) 断定 , 几乎 必然 Sn = O(vninlnn). 

最 后 , 1924 年 A. Я. ЗЕ (A. J. Khinchin, Über einen Satzder Wahrscheinlichkeit- 
srechnung//Fundamenta Mathematicae, — 1924. — V.6. 一 P.9~20 到 最 终 的 结果 
CERBER”): 几乎 必然 , 有 


Sn 


М шап 


lim зир 
(需要 指出 , 对 于 所 考虑 的 情形 ， 
2 

б=®[&=)-%] =} 


因为 出 现 了 因子 n/2, 而 不 是 因子 2n; 对 照 84 定理 1 的 提 法 ). 

如 同 м 提 到 的 , 下 一 步 就 是 对 于 广泛 的 独立 随机 变量 类 , 证 明 重 对 数 定律 , 这 
是 由 А. Н. 柯 尔 莫 戈 洛 夫 于 1922 年 实现 的 (A. М. Kolmogoroff, Über das Gesets des 
iterierten Logarithmus//Mathematische Annalen, 一 1929. — \.101, 一 P.126~135). 


$5. 关于 这 些 问题 , 见 B. В. 彼得 罗 夫 [92], А. А. 博 罗 夫 科 夫 [7], D. 达 昆 纳 - 卡 
斯 特 里 (D. Ducunna-Castelle) 和 М. 杜 弗 劳 (M. Duflo) [86]. 


第 五 章 
§1~83. 在 叙述 (GR) 平稳 随机 序列 时 , 借鉴 了 书籍 : L. 布 赖 最 [8], Я. Г. 希 奈 (A. 


Г. Синаи) [63], J. 兰 珀 蒂 (J. Lamperti) [38]. A. М. 加 尔 西亚 (A. M. Garsia) [12] 给 
出 了 最 大 遍历 性 定理 的 简单 证 明 . 
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第 六 章 


$1， 关 于 (广义 ) 平稳 随机 序列 理论 见 下 列 图 书 : Ю. А. 罗 扎 诺 夫 (Ю. А. 
Розанов) [60]. И. И. Ж#% (И. И. Гихман) 和 А. В. Р (А. В. Cko- 
роход) [13], [14]. А. Н. 柯 尔 莫 戈 洛 夫 常 在 讲课 时 举例 6. 

$2. 关于 正 交 随 机 测度 和 随机 积分 , 亦 见 J. L. 杜 布 (J. L. Doob) [20], И. И. Ж 
HRA A. В. 斯 科 罗 霍 德 [14j, IO. А. 罗 扎 诺 夫 [60], в. В. 阿 什 和 М. Е. 加 德 纳 М. 
Е. Cardner [82]. 

$3. 谱 表 现 (2) 是 Н. ИЗ (Н. Cramer) 和 М. 洛 埃 甫 (M. Loéve) 得 到 的 ( 例 
如 , Я [42]). ЕАН. 柯 尔 莫 戈 洛 夫 的 著作 [29] 中 , (在 其 他 术语 下 ) 含 这 样 的 表现 . 
亦 见 如 下 著作 : 1. L. 杜 布 [20], Ю. А. 罗 扎 诺 夫 [60], R. В. 阿 什 和 M. Е. 加 德 纳 M. 
Е. Cardner [82]. 

34. ЕЕ. J. № (Е. J. Hannan) 的 书 [71] 和 [72] 中 , 有 协 方差 函数 和 谱 密 度 的 
统计 估计 问题 的 详细 叙述 . 

55~56. 亦 见 下 列 图 书 : Ю. А. 罗 扎 诺 夫 [60], J. 兰 珀 蒂 [38], И. И. ЖЖ! А. 
В. 斯 科 罗 霍 德 [13], [14]. 

87. 这 部 分 内 容 , 是 按 P. Ш. 利 普 彩 尔 (P. Ш. Липцер) ЯТА. Н. 施 利 亚 耶 夫 
的 书 [41] 叙述 的 . 


第 七 章 


$. ИЕН А J. L. 杜 布 得 到 的 [20]、 定 理 1 包含 在 P. -А. ЖЖ 
(Р. -A. Meyer) 的 专著 [47] P. 亦 见 , P. -A. 麦 耶 的 书 [48], Р. Ш. 利 普 彩 尔 和 А. Н. 
施 利 亚 耶 夫 的 书 [41], И. И. ЖЖ А. В. 斯 科 罗 截 德 [14], J. 扎 克 德 (J. Jacod) 
和 А. Н. 施 利 亚 耶 夫 [87]. 

$2. 定理 1 常 称 为 “关于 自由 选择 的 变换 ”定理 , [20]. 关于 恒等式 (13) 和 (14), 
以 及 A 瓦尔 德 基本 恒等式 , 见 书 [9]. 

$3. 第 一 个 不 等 式 (25), ЖА. Я. PKF 1923 年 在 其 论文 (A. J. Khintchine, 
Über dyadische Briiche//Mathematische Zeischrift 一 1923. — V18, Р.109~116) Ф, 
在 证 明 “ 重 对 数 定律 ”时 得 到 的 . 为 说 明 是 什么 使 A. Я. 辛 钦 必然 会 得 到 该 不 等 式 ， 
我 们 提醒 注意 , Е. 博 雷 尔 和 Е. 豪 斯 多 夫 证 明 强 大 数 定律 的 概 形 ( 亦 见 上 面 对 第 四 章 
32-44 的 评述 ). 

设 &1,62,… 是 独立 同 分 布 随机 变量 列 , E рє, = 1} = P{é2 = 一 1} = 1/2 ( 伯 
努 利 概 形 ), Sn = &1 ++. 

Е. 博 雷 尔 的 证 明 “ 几 乎 必然 Sn = o(n)” 的 实质 如 下 : 由 于 对 于 任意 6> 0, 有 


"i 


5 Е54 3? 3 
26} < м < = ; 
n } 1164 ~ nipi — п2ба 
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4 п = ос 时 
А в 


因此 , 根据 博 雷 尔 - 坎 泰 利 引 理 (第 二 章 810), 几乎 必然 Se/ 一 0. 
F. 豪 斯 多 夫 的 证 明 . 对 于 任意 = > 0, “几乎 必然 Sn = o(n1/2+5)”, 是 类 似 地 进行 
的 : 因为 ES? = Oln”), 对 于 任意 整数 r > 1/(2=), 则 当 一 оо 时 


| 
Ө |2} < Er al 
т 
=} кы < ж? рит 0 
к2п 


其 中 c 是 常数 . 由 此 (仍然 根据 博 雷 尔 - 坎 泰利 引 理 ) 可 得 , 几乎 必然 
Sn 
п1/2+её 

由 以 上 的 讨论 可 见 , 证 明 的 关键 是 对 于 概率 P{lSn| > Кп)} 得 到 “好 ”估计 ， 
其 中 对 伯 雷 尔 , Ки) = п. 豪 斯 多 夫 , t(n) = n+, (ERMER REW, t(n) = 
(nlnam)V2)， 

下 是 为 得 到 概率 P{lSn| > t(n)} 的 “好 ”估计 . А. Я. 辛 钦 用 到 他 的 “ 辛 钦 不 等 
式 ”(25) (确切 地 说 , 这 些 不 等 式 中 的 第 一 个 ). 

关于 辛 钦 ( 右 和 左 ) 不 等 式 对 于 任意 p > 0 的 推导 , 以 及 在 (25) 式 中 关于 常 
ЖА, 和 В, 之 最 优 性 的 证 明 , I Г. 佩 舍 基 尔 (Г. Пешкир) 和 А. Н. 施 利 亚 耶 夫 
的 综述 性 文章 : Неравен-ства Хинчина и мартингальное расширение сферы их 
действия ( 辛 钦 不 等 式 及 其 应 用 范围 的 扩展 )//yYcrnexm математических наук. —. 
1995 年 , T.50, 5. стр. 362. 

由 (25) 式 的 第 一 个 不 等 式 , 当 p= 2m В, А. Я. 辛 钦 得 到 , 对 于 任意 t > 0, 




















— 0. 


Р{|Х,| > t} < 2х," < Cm 


由 斯 特 林 公式 оту 
2т) ау с 
отті <2 (2) А 


其 中 D = V2. 因此 , 若 设 т = [2/(2[X]2)], WE 


рЫ Уи не: 


рх >0 < (21 y «ре < Desp f1 - 


Е рео) =}. 


дин} 
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Зе = De = уе. 
由 此 估计 . 可 得 不 等 式 


了 P{lsn| >t} < ed, 


А. Я. 辛 钦 曾经 利用 该 式 , 证 明 5, = О(Упш ши) (а.с.). 

ДЕ У. S. F (Y. S. Chow) 和 泰 切 尔 (H. Teicher) 的 书 中 [73]. 有 大 量 在 这 一 节 引 
用 的 不 等 式 . 定理 2 属于 E. Lenglavt [39]. 

54. № J. L. 杜 布 的 专著 [20]. 

$5. 这 里 叙述 的 内 容 遵 循 如 下 读者 的 文章 : Ю. М. 卡巴 诺 夫 (IO. М. Кабанов), 
Р. Ш. 利 普 彩 尔 , А. Н. 施 利 亚 耶 夫 [26]. H. -1. 恩格尔 伯 特 (Н. -1. Engelbert), А. Н. 
施 利 亚 耶 夫 [79]. 以 及 奈 维 尤 (J. Neveu) 的 书 [50]. 定理 4 和 例 是 P. Ш. 利 普 彩 尔 
提供 的 . 

86， 这 里 对 “绝对 连续 性 和 奇异 性 ”问题 提供 的 处 理 方法 , 以 及 所 介绍 的 结果 ， 
包含 在 Ю. м. 卡巴 诺 夫 , Р. Ш. 利 普 彩 尔 , А. Н. 施 利 亚 耶 夫 的 工作 [26] 中 . 

87. 定理 ! 和 定理 2 世界 语 属于 А. А. 诺 维 科 夫 (А. А. Новиков) [52]. 引 理 1 
是 著名 的 吉尔 萨 诺 夫 (Гирсанов) 定理 的 “离散 ”类 似 (Ж, [41]). 

$8. КЛ, Р. Ш. 利 普 彩 尔 和 А. Н. 施 利 亚 耶 夫 的 书 [91], J. 扎 克 德 和 A. Н. № 
利 亚 耶 夫 [87], 在 该 书 中 讲述 相当 一 般 情形 的 随机 过 程 论 ( 鞭 , FR ……… ). 

59. 这 里 叙述 遵从 [98].[100]. ХЧ (10 Kivosi) 公式 的 推广 , 所 叙述 的 方法 
的 发 展 , № H. 福 尔 默 (H. ЕбШиег). Ph. 普罗 泰 尔 (Ph. Protter) 和 А. Н. 施 利 亚 耶 
夫 的 文章 [101]. 

510. ЖЕЛЕ, 见 格 贝尔 (H. Gerber) 的 书 [123]. 所 作证 明 接近 [98] 
中 相应 的 证 明 . 

811~812. 涉及 鞭 方 法 , 在 金融 数学 和 金融 工程 学 中 的 应 用 问题 , 较为 详细 的 叙 
Ж, 见 [100]. 

$13. 最 优 停止 规则 主要 专著 是 : Е. В. 邓肯 (Е. В. Dynkin) 和 А. А. 尤 什 克 维 奇 
(А. А. Юшкевич) [102], Н. В. 罗 宾 斯 (H. В. Robbins), D. 西 格 蒙 德 (D. Sigmund) 
Ж Y. 5. JF [59], А. Н. 施 利 亚 耶 夫 [78]. 
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8182. 关于 马尔 可 夫 链 的 定义 和 基本 性 质 , 亦 见 下 列 著作 : Е. В. 邓肯 和 A. А. 
尤 什 克 维 奇 [102], Е. В. 邓肯 [21], А. Д. 温 策 尔 (А. Л. Вентцель) [11], J. L. 杜 布 
[20], И. И. 基 赫 曼 和 А. В. ДЕР Я [14], L. 布 赖 曼 [8], 钟 开 莱 (Каі Lai Chung) 
[75],[120], D. ЖЖ (D. Revuz) [117]. 

8357. 关于 马尔 可 夫 链 的 , 极限 , 遍历 和 平稳 概率 分 布 问题 , 见 А. Н. ARAR 
洛 夫 文章 [28], 和 如 下 书籍 : W. 费 勒 (W. Feller) [69], А. А. 博 罗 夫 科 夫 [7], [104], К. 
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В. 埃 什 (R. В. Ashi), 钟 开 莱 [120], D. Ж ЖЖ [117], Е. В. 邓肯 和 А. А. 尤 什 克 维 
奇 [102]. 
38. 简单 随机 游 动 . 是 最 简单 的 马尔 可 夫 链 的 经 典 例子 , 对 此 情形 曾经 发 现 了 许 
多 规律 性 (例如 , 常 返 性 于 非常 返 性 , 遍历 性 等 等 ) 有 关内 容 在 许多 图 书 中 都 有 , 例 
如 , 上 面 引用 过 的 书 [7],[80),[120],f117]. 

$9. 统计 序列 分 析 问 题 (А. 瓦尔 德 [9], M. de 格 鲁 特 (М. de Gloot) [18], S. 萨 克 
斯 (S. Sacks) [22], А. Н. 施 利 亚 耶 夫 [78]), 决定 了 对 于 最 优 停 时 问题 的 兴趣 . 关于 
马尔 可 夫 链 的 最 优 停 时 规则 本 身 , 有 如 下 著作 : Е. В. 邓肯 和 А. А. 尤 什 克 维 奇 [102], 
А. Н. 施 利 亚 耶 夫 [78]), Р. 比 林 斯 利 (P. Billingsley) [106] 的 某 些 章节 , 最 优 停 时 问 
题 的 蒜 方 法 , I H. В. 罗 宾 斯 , D. 西 格 蒙 德 和 Y. 5. 乔 的 专著 [59]. 











概率 的 数学 理论 形成 的 简 史 


该 简 史 是 本 书 的 作者 , 为 A. Н. 柯 尔 真 戈 洛 夫 的 专著 《概率 论 的 基本 概念 》 [32] 
第 三 版 , 作为 补充 而 写 的 . 
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名 词 索 引 


(汉语 拼音 为 序 , 右上 角 带 “1” 者 为 第 一 卷 页码 ) 





І» - 收 全 275\ 

(С) 155 

(р) 156! 

(В,5)- 金融 市 场 206 
完全 的 213 

CRR 模型 211,223 

(Е,&) 185! 

U- 曲线 99! 

和 一 系 14! 

т-А- Ж 144 
т- Ж 144! 

0-1 律 (WER) 

X2 分 布 162, 163! 

ЕЙЖ 163! 

В 分 布 163! 

Г 分 布 163! 

+ 分布 163', 263! 

х Ят 252 


А 


埃 尔 米 特 多 项 式 292! 
埃 森 不 等 式 319 
按 变 差 收敛 ”3921 

按 分 布 等 价 性 (相等 ) 386° 


按 分 布 收敛 ”2751, 355!, 385! 
按 箱 分 配 质 点 T 


B 


RAER 35 

Вже 283! 

白 噪声 52 

半 不 变量 , 混合 的 312: 
一 简单 的 314 

半 范 数 2811 

半 连 续 函数 заз! 

邦 弗 尔 罗 尼 不 等 式 15! 

贝尔 不 等 式 44 


贝 里 - 埃 森 不 等 式 。61', 363', 406! 


贝 塞 耳 不 等 式 2881 
贝 叶 斯 定理 ”26 
~ ER, 广义 的 242! 
~AR 25 
本 质 上 确 界 283', 228 
“表决 "定理 ”1042 
必然 事件 9 
变 差 接近 程度 392' 
变换 
Re~ 210 
条 件 ~ ~ 212 
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RA ~ 35 
遍历 ~ 38! 
伯 努 利 ~ 45 
不 变 ~ 38 
几乎 ~~ 38 
度量 可 递 ~ 38 
傅 里 时 ~ 299! 
柯 尔 莫 龙 洛 夫 ~ 45 
克拉 默 ~ 29 
拉 普 拉 斯 - 斯 蒂 尔 切 斯 ~ 38 
遍历 分 布 的 基本 ~ 279 
МЕ 115°, 38 
~M 1151, 44 
~ 定理 ( 均 方 意义 下 的 ) 44 
ЖХ о 40 
ЗЕЕ 391, 254! 
标准 概率 空间 268: 
伯 恩 斯 坦 多 项 式 。53? 
“йй ы! 
伯 努 利 概 型 44!，541 
~ 系列 357°, 3631 
~ 推移 45 
博 雷 尔 不 等 式 334' 
六 代数 мо! 
~ 函数 178! 
~ Ж 149! 
~- ЖЖ 277 
~ Жн} 241! 
博弈 15 
~ 平均 持续 时 间 821 
不 利 ~ 86', 115 
有 利 ~ 15 
公平 ~ 115 
博 雷 尔 正规 数 19 
博 泽 一 爱 因 斯 坦 统计 8! 
泊 松 过 程 202 
不 变 原理 367' 
补偿 117 
不 等 式 
奥 塔 维 安 尼 ~ 146 


ИЖ ~ 16' 

埃 森 ~ 319' 

邦 弗 尔 罗 尼 ~ 15 

贝尔 ~ 44! 

贝 里 - 埃 森 ~ 611, 3631, 4061 
贝 塞 耳 ~ 288! 

变 分 ~ 230,300 

博 雷 尔 334 

АВ о 138 

ЖЖ о 140: 

杜 布 ~ 132 

REW ~ 138 

大 偏差 概率 ~ 68°, 143 
德 沃 列 茨 基 ~ 147 

范 数 ~ 281! 

ИБ ~ 15' 

МД ~ 16 

险 伊 克 - 雷 内 伊 147 

赫 尔 德 ~ 202! 

柯 尔 莫 戈 洛 夫 ~ 8 

柯 尔 莫 戈 洛 夫 ~ ( 单 侧 类 似 ) 12 
柯 西 ~- 布 尼 科 夫 斯 基 ~ 371, 201! 
柯 西 - 施 瓦 交 37 

RA- 克拉 默 ~ т! 

列 维 ~ 27 

李 雅 普 诺 夫 ~ 2011 
马尔 钦 凯 维 奇 ~ - 齐 格 蒙特 ~ 137 
闵可夫 斯 基 ~ 202! 

切 比 雪夫 ~ (二 维 情形 ) ы! 
切 比 雪 夫 ~ 46!, 2001 
斯 莱 皮 恩 ~ 334 

ЖЖ 37 

辛 钦 ~ 137 

з ~ 201! 

延 森 ~ (条 件数 学 期 望 ) 251! 
最 大 ~ 132 


不 放 回 抽样 。61, 7!, 20° 
不 可 能 事件 9 

不 利 博弈 86' 

不 确定 性 度量 51 
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布尔 不 等 式 1407 
ШЕН 236! 


布朗 


~ Я 330' 

~ іва) 330: 

~ 运动 的 结构 330! 
~ 运动 过 程 330! 


58 

~ 的 奇异 性 ”398', 164 
不 变 ~ 256 
带 符号 ~ 391? 
等 价 ~ 398, 164 
埃 会 ~ 20 
概率 ~ 135 
яз 
绝对 连续 ~ ~ 
局 部 ~~~ 165 
эу ~ 的 充分 条 件 
计数 ~ зол! 
o- 可 加 ~ 
勒 贝 格 ~ 
勒 贝 格 - 斯 蒂 尔 切 斯 ~ 
离散 ~ 162!, 394! 
内 ~ 162! 
外 ~ 161! 
完备 ~ 1611 
完全 可 加 ~ 
п 维 勒 贝 格 ~ 
维 纳 175 
Ж ( 强 ) ~ 463! 
有 限 可 加 ~ 134 
o 一 有 限 ~ 1351 
有 限 可 加 随机 ~ 58 
原子 ~ 2841 
在 “0” 连续 的 ~ 
平稳 ~ 256 
随机 ~ 58 


135! 


1351 
168' 


1361 


164', 165°, 398', 164 
163', 204', 398', 164 


168 


1611, 1661, 168! 


161,165! 


初等 ~~ 58 
ER ~ 467!, 164 
有 具有 正 交 值 的 ~ 58 
测度 的 绝对 连续 性 ”2041 
~ Я 159! 
一 收缩 1т2! 
~ НЯ 29! 
测度 序列 的 相合 性 4001 
~, 完全 可 区 分 的 ”4011 
~ 相互 临近 的 ”4011 
~ 的 完全 可 区 分 性 401 
乘积 分 布 ”211 
充分 统计 量 246! 
最 小 ~ ~ 250! 
~ Ф о- Қа 246! 
~ Fo 代数 , ЖЛ) 249! 
抽 彩 13! 
重 对 数 定律 24 
重合 问题 12! 
抽样 , 不 放 回 的 6, 7', 20! 
~ ЖЕ 51,7 
稠密 随机 变量 序列 4017 
初始 分 布 110° 
ЗЕ 288), 297! 


р 


大 偏差 ”68 ,29 
> 概率 不 等 式 68 
大 数 定律 ”441, 491, 356! 
伯 努 利 ~ 48' 
H~ 357 
马尔 可 夫 链 ~ 117! 
强 ~ 13 
~ ~ 的 收敛 速度 28 
辛 钦 ~ 3481 
代数 
集合 诱导 的 ~ 1а 
с ~ 135!, 141!, 182! 
随机 变量 诱导 的 ~ 1821 
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分 割 诱 导 的 ~ 183' 
~ 的 直 积 150! 
剩余 ~ 2 
尾部 ~ 2 
带 符号 测度 。 391 
单调 类 142! 
~E 142! 
~ 函数 形式 148 
^ 收敛 定理 194 
导数 
拉 东 - 尼克 戴 姆 ~ 204! 
勒 贝 格 ~ 398° 
等 价 测度 ”398!, 164 
等 价 随机 变量 281! 
等 距 对 应 ”63 
邓肯 d- 系 144 
第 二 博 雷 尔 - 坎 泰利 引 理 。284" 
第 二 类 错误 392 
入 概率 392 
第 一 类 错误 392: 
~ ЖЖ 392! 
定理 
贝 叶 斯 ~ 25, 241: 
贝 里 - ЖЖ 61, 406° 
毕 达 哥 拉 斯 ~ 298! 
毕 达 哥 拉 斯 - ЖАК 40 
波 利 亚 随机 游 动 ~ 288 
遍历 性 ~ 115!,43 
遍历 分 布 的 基本 ~ 279 
最 大 ~~ 40 
测度 开拓 ~ 169!, 173! 
单调 类 ~ 142! 
单调 收敛 ~ 194! 
随机 金融 学 的 第 一 基本 -. 208 
随机 金融 学 的 第 二 基本 ~ 213 
RER- 拉 普 拉 斯 60 
波 利 亚 ~ (关于 特征 函数 的 ) 310° 
ЖЯ ~ 120, 142, 148 
杜 布 ~ (关于 最 大 不 等 式 的 ) 148 
杜 布 (ЖРТ (CER) 分 解 的 ) 117 


杜 布 ~ (关于 时 间 随 机 替换 的 ) 120 

Н ~ (AEF CER) 收敛 性 的 ) 
148 

杜 布 ~ (关于 相交 次 数 的 ) 142 

ЖЕ ~ 207! 

格 里 汶 科 和 康 特 利 ~ 411! 

广义 贝 叶 斯 ~ 242! 

过 程 的 存在 性 ~ 268! 

赫 利 ~ 350' 

赫 利 - 布雷 人 347! 

赫 尔 格 洛 蒋 ~ 55 

吉尔 萨 诺 夫 ~ (离散 型 变 式 ) 179 

局 部 极限 ~ 71,79 

RARER - Жо 8 

~ > “两 级 数 " ~ 10 

~ ~ 测度 的 开拓 ~ 208 

~ ~ 测度 的 开拓 ~ 204 

~ ~ 过 程 的 存在 性 ~ 268: 

~ ~ “三 级 数 ” ~ и 

~ ~ Мій ~ 90 

卡拉 泰 奥 多 里 ~ 159! 

еж м 

RA - 布莱克 韦 尔 ~ 251! 

RR - 尼 科 戴 姆 ~ 204° 

Fl ~ 2241, 150 

勒 贝 格 积分 中 的 变量 替换 ~ 206° 

勒 贝 格 控制 收敛 ~ 196! 

连续 性 ~ 353! 

BKNE ~ 310! 

麦克 米兰 ~ 52! 

曼 - 沃 尔 德 ~ 388! 

RE~ 333! 

泊 松 ~ 621, 3571, 419! 

庞 加 莱 ~ 268! 

БЕЛЖ ~ (关于 回 返 性 ) 36 

平稳 分 布 的 基本 ~ 279 

普罗 霍 罗 夫 ~ 349! 

切 尔 诺 夫 ~ 31 

图 尔 恰 ~ 270' 

维尔 斯 特 拉 斯 ~ 531 
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伍 拉 姆 ~ 352! 
ЖАК - № > 309° 
因子 分 解 ~ ”247: 
正 态 相关 ~ 304 
正 态 相关 ~ (向 量 形式 ) 258: 
中 心 极限 ~ 353!, 356°, 2591, 3641, 
369' 
独立 随机 变量 的 ~ ~ 182 
ЖЖ о 184 
“关于 自由 选择 的 变换 ”~ 337 
( 定 ) 律 
博 雷 尔 0-1 4 
柯 尔 莫 戈 洛 夫 0-1 ~ 3, 151 
休 伊 特 和 塞 维 奇 0-1 ~ 6 
反正 弦 ~ 92!,9Т! 
大 数 441, 491, 3561 ( 亦 见 “大 数 定 
t”) 
重 对 数 24 
定义 类 345! 
定义 收敛 类 345! 
动态 规划 301 
独立 性 231, 271 
合 (事件 ) 的 ~ 27}, 281, 48! 
集合 代数 的 ~ 27, 281, 49! 
集 系 的 ~ 27 
两 两 281,41 
随机 变量 的 ~ 341, 187! 
随机 元 的 ~ 187! 
增 量 的 ~ 331! 
独立 增 量 过 程 331' 
度量 
范 基 (Fan Ку) > 386! 
ЖИ - ФЕ Ж ~ 381! 
对 数 的 主 值 361! 
对 数 利润 ”206 
多 维 超 几 何 分 布 20' 
多 项 式 
埃 尔 米 特 ~ 292! 
伯 思 斯 坦 ~ 5з! 
泊 松 - 沙 利 耶 ~ 293! 


赋 范 泊 松 - 沙 利 耶 ”2931 
定义 类 345! 
定义 收敛 类 3451 


Е 


ЕХ 
~ 变 差 (ЙЧ) 118 
~ 协 方差 (W) 118,195 
~ 特征 (Ай) 118 

二 维 高 斯 密度 257 

二 维 切 比 雪夫 不 等 式 ы! 

二 项 分 布 12! 

二 项 随机 变量 33' 


Е 


(5) 法 
矩 ~ 353! 
蒙特 卡 罗 ~ 231! 
特征 函数 ~ 3531 
一 个 概率 空间 ~ 3851, 387! 
最 小 二 乘 ~ 161 
罗 宾 斯 - 门 罗 ~ 155 
法 图 引 理 196! 
范 基 (Fan Ку) 度量 386! 
范 数 不 等 式 2811 
反射 原理 92! 
反射 壁 ”291, 292 
反正 弦 律 92, 9т! 
方差 ”391, 2541 
样本 ~ 266° 
方程 
动态 规划 ~ 301 
更 新 ~ 373) 
柯 尔 莫 戈 洛 夫 EFR 12,2691, 
248 
后 向 柯 尔 莫 戈 洛 夫 一 查 普 曼 ~ 113! 
前 向 柯 尔 莫 戈 洛 夫 一 ENR ~ 1! 
瓦尔 德 - 贝尔 曼 ~ 301 
非 负 定 矩阵 255 
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FARKI 369' 

非 相关 性 411, 2541 

费 希 尔 信息 量 т! 

弗 希 尔 不 等 式 15! 

费 叶 尔 核 76 

分 布 
х? ( 卡 方 ) ~ 1631, 262! 
Е ~ 163! 
B~ 163' 
r~ 163! 
t~ 163!, 263! 
x ~ 262! 
贝塔 (В) 163! 
遍历 ~ ит 
伯 努 利 ~ 331 
泊 松 > 63', 162' 
不 变 ~ 117! 
超 几 何 ~ 20! 
乘积 ~ 211 
初始 ~ 110! 
对 数 正 态 ~ 260! 
多 维 ~ за 
多 维 超 几何 ~ 20! 
多 项 ~ 19! 
二 项 ~ 16!,33! 
负 二 项 178 
m5 (Г) ~ 163' 
高 斯 ~ 647, 163' 
过 程 的 概率 ~ 186! 
几何 ~ 162! 
PA ~ 163, 262! 
柯 尔 莫 戈 洛 夫 ~ 4181 
柯 西 ~ 163' 
离散 均匀 ~ 162! 
离散 型 ~ 162! 
逆 二 项 ~ 178! 
帕斯卡 > 162! 
平稳 ~， 117!,257,258 
奇异 ~ 164 
指数 ~ 163 


双 指数 分 布 ~ 2651 
随机 向 量 的 概率 ~ 34 
韦 布尔 265 

п 维 高 斯 ~ 168° 

稳定 ~ 376! 

学 生 ~ 1631, 263! 

E [a,b] 上 的 均匀 ~ 163! 
正 态 ~ 64!, 1631 

~ 的 卷 积 261! 

~ В 50! 

~ 的 相合 性 (等 价 性 ) 3731, 386! 


分 布 函 数 331, 341, 1591 


分 割 
分 解 


分 类 


广义 ~ 165 

随机 变量 的 ~ 331, 341, 159! 
随机 向 量 的 ~ 34! 

п ~ 167! 

稳定 ~ 376' 

无 限 可 分 ~ 373! 

正则 ~ 239! 

19° 


沃 尔 德 ~ 78,82 
点 则 序列 的 ~ 185 
Н о 17 

哈恩 (Hahn) ~ 392! 
克 里 克 伯 格 ~ 146 
勒 贝 格 ~ 398', 165 


马尔 可 夫 链 状态 按 代数 性 质 ~ 258 
~ > 按 渐 近 性 质 ~ 264 


分 配 问 题 7 

分 位 函数 ”387? 

分 支 过 程 112! 

封闭 线性 流 形 291 

Ж - 狄 拉克 统计 В! 

数值 随机 变量 185! 
仿 里 叶 变 换 299 

赋 范 埃 尔 米 特 多 项 式 292! 
赋 范 泊 松 - 沙 利 耶 多 项 式 ”293 
放 回 抽样 5,7! 
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概率 
古典 型 ~ 12! 
保险 中 的 破产 ~ 201 
第 一 类 错误 ~ 392! 
第 二 类 错误 ~ 392! 
结局 的 ~ 11! 
破产 ~ 821, 861 
首次 进入 状态 1 的 ~ 126! 
首 返 状态 j 的 ~ 126", 265 
验 后 ~ 2%! 
验 前 ~ 26! 
入 模型 111, 691, 246 
> 测度 135! 
概率 空间 11!,161! 
标准 ~ 268! 
完备 ~ 161: 
过 滤 ~ 787 
概率 论 的 公理 138! 
概率 模型 69', 246! 
广义 的 ~ 134 
概率 统计 模型 69', 246! 
~ 246! 
刚 贝 尔 不 等 式 16 
高 斯 
> 分 布 的 半 不 变量 315! 
> 分 布 的 均值 , УЖ 2541 
~it 330' 
~ 马尔 可 夫 过 程 269’, 332' 
~ 随机 变量 262! 
~ 系统 3231, 329! 
~ 向 量 , 分 量 独立 性 准则 326° 
~ 向 量 323!, 326! 
入 序列 330! 
格拉 姆 - 施 米 特 正 交 化 ”2901 
更 新 
~ 过 程 2721, 2731 
~ Я] 80 


估计 


TR 


~ 理论 的 基本 定理 ”129 
贝 叶 斯 ~ 25! 

分 部 积分 ~ 2171 

离散 微分 ~ 207 

概率 的 乘法 ~ 25 

矩 和 半 不 变量 换算 ~ 312! 

逆转 ~ 306' 

全 概率 ~ 25!, 27!, 75! 
数学 期 望 的 换算 公式 ~ 205! 

斯 特 林 ~ 21 

条 件数 学 期 望 的 换算 公式 ~ 2051, 712 
塞 格 - 柯 尔 莫 戈 洛 夫 ~ 634 
梯形 ~ 298 

RRI ~ 40, 195, 763 


(离散 时 间 ) ~ ~ 195,198 
(布朗 运动 ) ~ ~ 195 
伊 滕 清 变 量 痊 换 ~ 195 
(Ш) 41',257' 
巴特 利 特 谱 密度 的 ~， 77 
RRE ~ 77 

茹 尔 边 科 谱 密度 的 ~ 77 
“成 功 ” 概 率 的 ~ во! 

伯 恩 斯 坦 ~ Бат 
渐 近 无 偏 ~ 76° 


均 方 最 优 ~ 41', 57 
无 偏 ~ 69!,251!,73 
强 ~~ 162 
& ~ 69!, 73, 74 
有 效 69! 
最 大 似 然 ~ 22! 
最 优 线性 ~ 411, 2881, 297! 


~ 贝 叶 斯 定理 2411,6 
~ 分 布 函数 165! 
~ 马尔 可 夫 性 238 
~ 随机 变量 1801 


规范 正 交 可 数 基底 ”291? 


过 程 


布朗 运动 ~ 330!,183 


* 358 - 


ZARI 





泊 松 ~ 202 
独立 增 量 ~ 331! 
分 支 ~ nz 
高 斯 330' 
高 斯 - 马尔 可 夫 332! 
更 新 ~ 272! 
马尔 可 夫 ~ 269 
条 件 维 纳 ~ 332 
维 纳 ~ 330: 
~ 的 典型 轨道 51? 
~ 的 轨道 186° 
~ 的 实现 186! 
过 滤 92 
~,o- 代数 流 (Ж) 110 


H 


哈 尔 系 393 
赫 尔 德 不 等 式 202! 
哈 伊 克 - 费 里 德 曼 择 一 性 172 
海 利 - 布雷 引 理 ”347: 
海 林 格 积分 3951 
函数 
半 连 续 ~ 343! 
狄 利克 圭 ~ 221! 
分 布 ~ 331, 641, 159! 
ЊБ ~ 300 
分 布 ~ (随机 变量 的 ) 331, 215 
分 布 ~ (随机 向 量 的 ) 34! 
稳定 分 布 ~ 373' 
п 维 分 布 ~ 167 
更 新 ~ 273! 
构造 ~ 59 
广义 分 布 ~ 165 
к ~ 295! 
集中 ~ 321! 
可 测 ~ 178! 
拉 德 马赫 ~ 294° 
示 性 ~ 32 
调和 ~ 312 


Е ~ 312 

上 ~ 23 

下 ~ 23 

相关 ~ 50 

协 方差 ~ 50 
误差 ~ 65! 

无 限 可 分 分 布 ~ 273° 
有 限 维 分 布 ~ 267 
有 限 维 经 验 分 布 ~ 441! 
正则 分 布 ~ 239! 

~ 的 适当 集合 “148! 


函数 的 适当 集合 ”148 
险 因 分 解 ”3921 
恒等式 


后 向 


庞 加 莱 ~ 15! 
斯 皮 策 ~ 223! 
瓦尔 德 ~ 104! 


入 方程 из 

~ ~ М 14 

柯 尔 莫 戈 洛 夫 - 查 普 曼 ~ 方程 113 
~ ~ 的 矩阵 形式 113! 


放 回 抽样 5', 7 

换 元 积分 法 221! 

回归 曲线 258! 

混合 39 

жеж 312! 

混合 自 回归 和 移动 平均 模型 55 
幸 尔 德 不 等 式 202! 


1 


积分 


海 林 格 ~ 395° 

勒 贝 格 ~ 190! 

勒 贝 格 - 斯 蒂 尔 切 斯 ~ 191°, 207! 
gan~ 214 

上 ~~ 215! 

下 ~~ 215 


黎 曼 一 斯 蒂 尔 切 斯 ~ 1911, 207! 


名 词 索引 -359 -+ 





随机 ~ 59 
PR ~ ~ 200 
积分 极限 定理 49:, 58! 
局 部 极限 定理 49', 55 
基本 定理 
数理 统计 的 ~ 411! 
仲裁 理论 的 (第 二 ) ~ 213 
仲裁 理论 的 (第 一 ) ~ 208 
基本 事件 4 
~ 的 巴 拿 赫 空间 4', 1381, 283! 
~ 的 概率 1 
~ 空间 21!, 166° 
基本 收敛 ”340', 3411, 3461 
基本 性 
р 阶 平均 收敛 的 ~ 275", 2821 
依 概率 收敛 的 ~ 275", 280! 
以 概率 1 收敛 的 ~ 275!, 280! 
极限 可 忽略 性 369 
集 系 的 独立 性 27’, 28! 
Ж ( 合 ) 138: 
不 变 ~ 38, 43 
几乎 ~~ 38 
并 ~ 9! 
差 ~ 9!,138! 
对 称 差 ~ 42!,138! 
和 ~ 10! 
交 ~ 9',138! 
停止 观测 ~ 281 
继续 观测 ~ 281 
停止 ~ 83 
集合 代数 138' 
~ 独立 性 ”27!, 28!, 49! 
分 割 诱 导 的 ~ 10! 
平凡 ~ 10! 
几何 概率 236 
几乎 
~ 必然 193! 
~ к 275°, 3861 
~ 收敛 的 柯 西 准则 280° 
~ 不 变 随机 变量 38 


> 处 处 193! 
计数 测度 ”3941 
简单 随机 变量 178: 
建立 过 程 的 坐标 方法 ”268! 
渐 近 小 条 件 369! 
~ 绝对 连续 性 4011 
一 奇异 性 401: 
~ 完全 可 分 性 401! 
~ МЕ 369! 
角 谷 择 一 性 168 
р ЗРК 275! 
结局 4 
~ 的 空间 , 即 基本 事件 空间 
~ 的 概率 1! 
经 典 分 布 16! 
一 模型 16! 
局 部 极限 定理 49!,55! 
= 19!! 
绝对 ~ 191! 
合 ~ 312! 
~ Ж 3531 
~ 母 函数 223! 
~ 问题 的 唯一 性 3161 
1ER 
~ 的 代数 性 质 258 
非 负 定 ~ 255! 
随机 > 110! 
伪 逆 ~, 333) 
协 方差 ~ 2551, 3251 
转移 概率 ~ по! 
卷 积 (分 布 的 ) 261! 
绝对 连续 
~ 测度 163!, 204!, 308! 
~ 随机 变量 “178! 
~ 型 概率 分 布 163!, 2041, 3981 
绝对 连续 性 (测度 的 ) 
~ 充分 条 件 168 
测度 的 ~ 2041, 3981, 401" 
概率 分 布 的 ~， 1631, 4011 
渐进 ~ 400! 


360° 名 词 索引 





均 方 可 重 置 事件 组 140! 
~ Ш 275 可 交换 事件 组 ”1401 
一 误差 257 克 罗 内 克 符 号 2921 
~ 最 优 估计 量 421, 2561 空 集 138! 
均值 36! 空间 
^ Ш 325' 巴 纳 ~ 283! 
Е 基本 事件 ~ 211, 166! 
基本 事件 的 ~ ~ 41, 138! 


马尔 可 夫 链 的 状态 ~ 238 
相 空 (状态 ) 间 ~ 110°, 238 
~ ZLP(p > 1) 的 完备 性 282!, 283! 
~ 的 直 积 201, 1561 
控制 性 (优势 性 ) 135 
库 尔 贝 克 信 息 量 400! 


卡尔 莱 曼 矩 问题 唯一 性 准则 318: 
卡尔 莱 曼 准则 ( 矩 问 题 的 唯一 性 ) 318! 
ВЕКИ 164! 

柯 尔 莫 戈 洛 夫 公理 化 138! 

柯 尔 莫 戈 洛 夫 - 列 维 - 辛 钦 表 现 。 376 
柯 西 - 布 尼 科 夫 斯 基 不 等 式 37", 201: 


柯 西 - 施 瓦 效 不 等 式 37 L 
柯 西 准则 
几乎 必然 收敛 的 ~ 280' RR- KARTER 71° 
р ИВО ~ 282! 拉 德 马赫 系 2904 
依 概率 收敛 的 ~ 280" 拉 东 - 尼克 迪 姆 导数 204 
可 测 函 数 178' 莱 维 - 普罗 徐 罗 夫 度量 381 
可 测 空间 135! 勒 贝 格 
~ (R,.B(R)) 148 ~ 测度 161, 165!, 169! 
~ (Rn",. 罗 (R")) 150! ~ Ẹ 398! 
~ (R,. 多 (R=)) 152! ~ ЯМ 398! 
~ (ВТ,.(ВТ)) 153! ~ ЖЛ 190" ~ 196! 
~ (С,8(С)) 155! ~ 集合 系 161! 
~ (D, 罗 (D)) 156\ ~ 控制 收敛 定理 196! 
> - 斯 蒂 尔 切 斯 测度 1611, 165° 
~ w, Ня. 156° ， 
поз: >Я 1911, 207 
可 测 影射 34 类 
可 测 性 单调 ~ 142! 
关于 分 割 的 ~ 178 最 小 和 ~ ~ 142 
多 -~ 18! 非 周 期 ~ 261 
可 交换 事件 组 140: 定义 ~ 345! 
ийїї 120! 性 收 仇 ~ 345! 
可 数 可 加 哈代 函数 ~ Н? 83 
~E 135; RER 286° 
和 ~ 概率 135! 离散 测度 1621 


~ 概率 测度 135: 离散 更 新 理论 (基本 引 理 ) 270 
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离散 时 间 随 机 过 程 186:, 330! 
离散 型 随机 变量 178 
жал 214 
黎 曼 - 斯 蒂 尔 切 斯 积分 191, 207° 
利率 205 

单 ~ 206 

复 ~ 206 
李 雅 普 诺 夫 不 等 式 201 
连续 时 间 随 机 过 程 186", 330! 
连续 型 随机 变量 179 
链 的 吸收 状态 110" 
两 两 独立 性 281, 41! 
滤波 器 07 


> 的 脉冲 转移 函数 67 

卡尔 最 - Аң ~ 95,99 

物理 可 实现 61 
DRM- 门 罗 方法 155 


M 


马尔 可 夫 
~ 过程 269! 
~E 109', 110, 272!, 239 
齐 次 ~ о 110!, 139 
广义 ~~ 238 
ФЭБ ~ о 265 
非常 返 ~ ~ 265 
0 常 返 ~~ 269 
ЕЕ ~ ~ 269 
不 可 约 ~ 260 
Жр] 258 
平稳 ~ ~ ит 
~ ~ 的 试验 模型 ”108 
~ ~ 的 相 空间 110! 
= ~ 的 状态 空间 110' 
~ ~ 状态 的 巴 拿 赫 空间 110 
马尔 可 夫 核 243 
马尔 可 夫 性 110, 238 
狭义 ~ 238 
广义 ~ 238 


推广 ~ 249 
强 ~ 124,251 


麦克 斯 韦 - 波 尔 茨 曼 统计 81 


密度 


196, 202, 215, 243 
二 维 高 斯 ~ 168°, 256' 
条 件 分 布 ~ 235 
п 维 高 斯 ~ 168! 


闵可夫 斯 基 不 等 式 202! 
蒙特 卡 罗 方 法 237,19 


模型 


埃 伦 弗 斯 特 ~ 293 

伯 努 利 - 拉 普 拉 斯 294 

概率 - 统计 ~ 69! 

混合 自 回归 和 移动 平均 ~ 586 

(жим - 罗斯 - 罗 宾 斯 ) CRR ~ 211, 
223 

克拉 默 - 林 德 伯 格 ~ 202 

马尔 可 夫 链 的 试验 ~ 108! 

无 限 多 个 结局 的 试验 ~ 133! 

一 维 伊 金 格 ~ 21 

有 限 多 个 结局 的 试验 ~ 11! 


ЖЖ 223! 


N 


п 维 分 布 函数 


1081, 167! 


п ЕЙТ 168! 


~ 的 特征 函数 323! 
~ 密度 168! 
~ 特征 函数 323! 


п 维 勒 贝 格 测度 168! 
内 插 90 
内 测度 162! 


Р 


帕 塞 瓦尔 等 式 2911 
排列 组 合 12 

庞 加 莱 恒 等 式 151 
匹配 (或 标准 ) 3911 
频率 ”451 
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平价 购买 - 出 售 权 225 
平均 
~ 平方 ( 均 方 ) 收敛 ”2751 
> 收敛 的 柯 西 准则 2821 
~ 随机 游 动 时 间 88! 
单 侧 移动 ~ 53 
双 侧 移动 ~ 53 
平稳 分 布 的 基本 定理 279 
平稳 马尔 可 大 链 иг 
破产 概率 ”82!, 86', 200 
破产 问题 831 
谱 测度 56 
滤波 器 的 ~ 特征 67 
~ 76 
~ 函数 56 
~ 密度 52 
> 密度 的 估计 73 
~ 表示 (平稳 序列 的 ) 62 
^ 表示 ( 协 方差 函数 的 ) 55 
普 拉 特 引 理 222! 


Q 


齐 次 马尔 可 夫 链 110: 

期 货 218 

奇异 测度 164, 398! 
(相互 ) ~ 398' 

前 向 方程 ”113 
~ 的 矩阵 形式 113' 

前 向 柯 尔 莫 戈 洛 夫 - 查 普 曼 方程 
~ 的 矩阵 形式 113 

强 测度 зол! 

强大 数 定律 ”13 
~ (收敛 速度 ) 28 
更 新 过 程 的 ~ 20 
柯 尔 莫 戈 洛 夫 ~ 14, 16, 21 
用 于 蒙特 卡 罗 方 法 的 ~ 547 
用 于 数论 的 ~ 19 
ФИ ~ 159 

强 函 数 


峰 态 ~ 300 
最 小 ~ 和 ~ 300 
强大 数 定律 (F) 3481 
强 马尔 可 夫 性 1251, 251, 252 
强 (狭义 ) 平稳 序列 34 
切 比 雪夫 不 等 式 461, 200! 

切 萨 罗 求 和 法 ”2841 
求 概率 的 古典 方法 12 
区 分 假设 2931 
区 域 
停止 观测 ~ 299 
继续 测 ~ 299 
全 概率 公式 24,75, тт! 
权 (Жж) 11 


В. 


HAR 340,341! 
~ 的 可 度量 性 381° 
弱 (广义 ) 平稳 序列 


S 


散布 程度 ”391 
ж 50' 
上 积分 2157 
上 积分 和 213! 
上 黎 曼 积分 216! 
Ея по 
~ 的 控制 序列 “230 
射 [morphism] ( 保 测 变换 ) 35 
时 间 
合 ~ 312! 
绝对 ~ 191! 
首 返 > 92! 
停止 ~ ( 停 时 ) 83', 1021 
马尔 可 夫 ~ 111, 203 
示 性 函数 ”321 
~ 集合 的 32 
事件 87, 1381 
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一 代数 10! 
~ 的 独立 性 отт 
> 代数 的 独立 性 27 
~ ШК 9! 
~ МЕ 9 
和 ~ 的 并 9! 
< ЮЖ 10! 
入 的 交 9 
必然 ~ 9! 
不 可 能 ~ 9 
不 相 容 ~ 10! 
相 容 ~ 10! 
对 立 ~ 10 
基本 ~ 4, 1381 
可 交换 ~ 6 
试验 29: 
适当 集合 原理 143! 
收敛 
~ 速度 (强大 数 定律 的 ) 28 
~ 速度 (中 心 极限 定理 的 ) 28 
Р- ~ 275! 
按 变 差 ~ 392! 
按 分 布 ~ 2751, 355', 385' 
几乎 必然 ~ 274!, 386! 
р 阶 平均 ~ 274! 
均 方 ~ 274! 
平方 平均 ~ 275! 
F~ 340', 341' 
依 测度 ~ 274! 
依 分 布 ( 律 ) ~ 2751, 3551, 3851 
依 概率 ~ 274, 3861 
以 概率 1 ~ 2741, 386° 
首次 进入 状态 i 的 概率 ”126’ 
ВЕН 92' 
首 返 状态 j ЖЖ 126! 
数理 统计 49), 69! 
数理 统计 的 基本 定理 411 
数 最 积 286! 
数学 期 望 。36!, 189°, 190! 
~ 的 性 质 37!, 1921, 228! 


随机 变量 函数 的 — 39" 
条 件 ~ тті, 2251, 227! 
~ ~ 的 性 质 37), 192! 
顺序 统计 量 265! 
斯 莱 皮 恩 不 等 式 334' 
斯 鲁 斯 基 引 理 。 283: 
斯 皮 策 恒等式 2231 
Ук 107 
随机 变量 321, 2141 
不 变 ~ 38 
不 依赖 于 将 来 的 ~ 111, 203 
二 项 ~ 33! 
复数 值 ~ 183! 
高 斯 254! 
广义 ~ 180! 
几乎 不 变 ~ 38 
简单 214 
绝对 连续 ~ 179° 
离散 型 ~ 178! 
连续 型 ~ 215 
稳定 376! 
无 限 可 分 ~ 3741 
~ 的 独立 性 34!, 1871 
~ 的 函数 1851 
< Е 110! 
入 向 量 34, 185! 
全 序列 186!, 330! 
~ 的 完备 序列 ”401 
~ W 821, 921 
~ 的 正 交 规范 系 ”287? 
入 元 185 
~ 元 的 独立 性 1871 
随机 测度 58 
~ ~ (有限 可 加 的 ) 58 
~ ~ ( 正 交 的 ) 59 
~ ~ (有 正 交 值 的 ) 58 
~ ~ (初等 的 ) 58 
随机 分 量 219', 143 
随机 积分 59 
ЭШЕН ~ 201 
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关于 事件 的 ~ 225, 2331, 2341 
工 关于 随机 变量 的 ~ 80°, 2271 
广义 的 ~ 2281, 2971 


ты i 条 件 维 纳 过 程 ”3321 
= ит тазе 27: 
滤波 器 的 谱 ~ 67 ой о 
ЕВИЯ о 推广 马尔 可 夫 性 ”249 
特征 函数 299' 
稳定 ~ 376! Ww 
稳定 分 布 的 ~ 379! 
无 限 可 分 ~ 373! 望 远 性 то! 
~ 的 例 319° 第 一 ~ 228! 
~ Ж 353! 第 二 ~ 228 
人 ~ 性质 30! 瓦尔 德 恒等式 104', 124 
条 件 ~ 基本 恒等式 126 
~ 维 纳 过 程 332! 外 推 85 
~ 分 布 密度 235! 外 测度 161! 
~ 7% (关于 о - 代数 的 ) 227! 完备 
~ AE (条 件 的 总 体 ) 4' 入 性 292: 
人 两 点 215 = МЕ 161! 
极限 可 忽略 ~ 369! > 概率 空间 161! 
一 致 ~ ~ 184 完备 化 161: 
渐 近 小 ~ 369! 完全 
一 致 性 ~ 1741, 267° ~ 可 加 测度 “134? 
克拉 默 ~ 28 ~ 可 区 分 的 测度 序列 4012 
李 亚 普 诺 夫 ~ 3621 ~ 相对 列 紧 测度 集 349! 
林 德 伯 格 ~ 362' ~ 正 交 规范 系 291! 
条 件 概率 231, 225!, 207! 完全 套头 交易 220 
关于 o- 代数 的 227! 网 络 110° 
关于 分 割 的 ~ 75', 2251 维 纳 
关于 随机 变量 的 ~ 76°, 227! 和 ~ 测度 1751 
正则 的 ~ 238 ЖМ 330! 
~ ЯЖЕ 235' 条 件 ~ 过 程 (布朗 桥 ) 3321 
条 件数 学 期 望 80!, 1017, 102!, 227! 伪 道 矩阵 333! 
~ 的 性 质 228 稳定 随机 变量 ”376: 
~ 的 法 图 引 理 253! 沃 尔 德 分 解 78 
~ 的 延 森 不 等 式 251 无 偏 估计 量 69', 251! 
~ 号 下 收敛 性 的 定理 230! 无 限 多 个 结局 的 试验 模型 1331 


关于 с 代数 的 ~ 226' 无 限 可 分 随机 变量 73, 


名 词 索 引 
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无 序 样本 51, 61, т! 
无 重复 的 置换 5 
无 重复 组 合 5 
无 仲裁 208 
~ 可 能 性 207, 209 


х 


希 尔 伯 特 空间 287 
я ( 复 ) 50 
可 分 ~ 291" 
下 积分 215! 
下 积分 和 213! 
Та 216! 
КЖ (#8) 110 
局 部 ~ 113 
广义 ~ її 
显著 性 水 平 72' 
线性 
~ ЖЗ 341", 342! 
~ 绝对 连续 测度 706 
~ ЖЖ (封闭 的 ) 291! 
> 流 形 288', 291! 
~ 相关 性 401, 2541 
相对 紧 性 ”348!, 349! 
相对 列 紧 测 度 集 349! 
相关 函数 50 
相关 系数 40!, 254! 
相合 估计 量 69' 
相互 临近 的 测度 序列 “401 
相互 特征 118 
相 空 间 1101, 238 
相交 次 数 142 
协 方差 ”401, 2541, 49 
二 次 ~ 118 
~ 函数 330!, 49, 73 
НЕ 2251, 325! 
~ 函数 的 估计 73 
~ 无 关 性 ”289!, 342! 
> ~ 的 谱 表 现 55 


信息 量 
~ Иж т! 
~ 库 尔 贝克 400! 
施 瓦 效 不 等 式 37 
序列 紧 性 350! 
选 排列 数 6 
选择 审慎 的 未 婚 女 307 
序列 
遍历 ~ 42 
部 分 观测 ~ 92 
УВА ~ 51 
更 新 ~ 80 
щй. 742 
可 预测 ~ 647 
奇异 ~ 79 
弱 (广义 ~~ 50 
强 (狭义 ) 平稳 ~ 34 
确定 ~ 79 
完全 非 ~~ 79 
纯 非 ~~ 79 
弱 ~~ 49,50 
>= 的 谱 表示 62 
移动 平均 ~ 52 
正则 ~ 79 
选择 权 (option) 218 
买方 ~ 219 
卖方 ~ 219 
~ 的 合理 价格 220 
美国 型 ~ 221 
欧洲 型 ~ 222 
循环 子 类 262 


У 


ЖФ 201 
验 后 (后 验 ) ЖЖ 26! 
验 前 ( 先 验 ) жж 261 
# 1001, 110, 203 
广义 ~ 11 
局 部 ~ 113 
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ПИ ~ 102! 
列 维 ~ 111 
平方 可 积 ~ 118 
~ER 113 
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亚历山大 罗 娃 N. W. Alexaderdrova H. B. Алексадрова 
延 森 І. L. Iensen И. Л. Иенсен 
伊 金 格 Ezenger Изинг 
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БИЖ 
伊西 哈 尔 

я Каяк 
尤 什 克 维 奇 


扎 克 德 
扎 克 斯 
HFR 
祖 布 科 夫 
ИН 


I to Кіуові 


E. A. Ibragemov 
A. P. Yushikaivici 


7 


J. Jacod 

$. Zacks 

Ка! Lai Chung 

А. М. Zubkoff 
W. М. Zolotaileoff 


К. Ито 

А. Исихар 

И. А. Ибрагимов 
А. П. Юшкевич 


Ж. Жакод 

Ш. Закс 

Чжун Кай -лай 
А. М. Зубков 

В. М. Золотарёв 


记号 索引 





дА 

А°@) 
Ам 

ж 

а(9) 
BL 
B\A 
B(Ko, N;p) 
ж 

2(C) 
2(D) 

.多 (了 及) 
2R) 
5(К") 
2(R™”) 
2(RT) 
2([0, 1]) 
919.92 





记号 索引 


+3719. 





T(S; P) 

с 

соу(&, т) 

р 

рє 

(Ем) 
р(]#) 
4р(Х,У) 
АЕ (2) 
(Е,&) 

(Е,# р) 
(Л) 

(А) 

(Р, Р) 

Ес 

Efm, >n) 
Е(&: A) 
Е(&|Р) 
Ell) 
Elélg) 
Е(&) 
E(élm,*** sm) 
(т, ола) 
erf 

(^9 

F*G 

Е 


Ф(т) 
ylz) 

H(z) 

H(P, P) 

H(o; P, P) 

Ja 54Р 

JnédP 

(1-9) fp &(ж)С(ах) 
(R—-S) fr €(z)G(dz) 
(DS де 

12 

т» 


Z(M, м) 
(т, ть.) 
Li.m. 

М(Р) 

(м), 

(м) 


(vise ик) 
me 


MN 


п 


med 





7380. 记号 索引 

Р(А) в ал) 
Р(А|#) о(#) 
Р(А|#) о(&) 
P(Aln) Var(P ~ Р) 
Р(д) X; = max Xl 
Р(В|А) Ka 
P(B|2) (X.Y) 
Р(В|#) [X,Y]n 

Р, (х), 

p(w) {Xn ә} 

2 = {Раза € U} 2 

Р 2(А) 

р ZA) 

Ру х 

(Р") A (Р") а 

(Р") < (P") т 

(Pr) аъ(Р") (9,.4,Р) 
Р-Р (0,.%, Po;0 € Ө) 
IP- РІ М 

1б, у)! 3 

Про! [ea san] 
П (al an) 
п® 

R 

R 

R(n) 

В! 

ЕТ 

ве 

в" 

Rn 

В, (т) 

(R,.2(R)) 

р(&,п) 

Р(Р,Р) 


pln) 





В = (-00, оо) 实数 的 集合 , 实 直 线 , 一 维 欧 几 里 得 空间 
R4 = [0, оо) 

R = [—оо,оо] 扩充 实 直 线 : R = RU{-o0} {оо} 

R, = {0, о] 

0 一 一 有理 数 的 集合 

Q+ = ФП в, 

Rd — о 维 欧 几 里 得 空间 

м 一 一 自然 数 : {0,1,2,…} 或 {1,2,…} 

Z 一 一 整数 的 集合 : {0, 士 1, 士 2…'} 

C 复数 的 集合 


(а,5) = {Е В:а<т< b} [0,6 = {тЕВ:а<т< 5} 


(а, = {r ER: a <z < b}, (0,0) = {reR:a<z<b} 


inf X — RA ХСЕМТЯ 
supX — ЖА ХСЕ ЕЖ 
ОЕ rn 一 一 集合 X = {zm,zm+1,…} ТЯ 
sup т, 一 一 集合 = {zm,zm+1,…} 的 上 界 


п>т 


如 果 zn ЕВ п>1, 则 


liminf £n = limzn = sup inf zn，limsupzn = от, 
поо а >1 n>m #5 п 


inf sup ть, 


п> 


limzn = т <> йтт„ = Шах» = т $ limrn > T > limzn. 
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对 于 实数 
xt = max(T,0),r- = — min(x,0) 
% 11, #х#0, 
т® = 
0, 车 z=0 


туу = тах(т.у),т Лу = шщ(т, у) 





г] — 大 于 或 等 于 т 的 最 小 整数 


sign т 一 一 实数 г 的 符号 : 
1， 若 z>0， 
sign т = 0, 车 z=0， 


-1, #т<0 


(有 时 , 当 z >0 时 , 设 sign =1; 当 z<0 时 , 设 sign= -1) 
тъ эт, 其 中 ne {1,2,…}, 表示 шт =£ 
т Т а < тзт Та л, Т Нш = 
ти | Ж лу >тз >т [т RR т„ | H liman == 


对 于 复数 > = a 十 记 , фае, 而 ;= УТ 是 虚 单位 


=а-% с 的 共 辆 复数 
|а| z 的 模 (= Ма? +) 
Ве: 和 Im z — z 的 实 部 和 虚 部 : Re = = a, Im 2 = 


对 于 d- 维 欧 几 里 得 空间 К 


|т| — z = (xz1,… ога) 的 欧 几 里 得 范 数 , Вр FA 
的 -›та) Му = (у. ү 的 数量 积 , 即 ту ++ таза 
集合 论 


An1 表 示 41C 42C…;An14 表 示 An1 且 U4n=4 
An | 表示 A 2 422…;An14 表 示 А» | В ПА, = А 
limsup An, X limAn, È N (y, ^) 表示 {有 无 限 多 个 A,} 一 一 属于 无 限 多 个 集 


т>1 \n> 


E An(n > 1) 的 点 的 集合 
liminf An, 或 limAn, 或 Ч (a А) аж 


n>m 





除外 ) 


常用 数学 符号 
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集合 Aln > 1) 的 点 的 集合 
ТА ЦА) 一 一 集合 А 的 示 性 函数 


{…} 一 -集合 
数学 符号 
<< —— 绝对 连续 
~ 
1 — #8 р 
f = о(9) 一 一 lim (2) =0 
f = O(g) 一 一 limsup A < oo 





шв (= 
1-9 im (/) 1 


Fai шй 7 自 下 与 0 分 离 , 且 自 上 与 oo 分 离 


Јод 了 与 9 的 复合 
f*g j g 的 卷 积 


